2024-07-01から1ヶ月間の記事一覧

Causal TreeとCausal Forestの理論と実装

はじめに Causal Tree CATE(条件付き平均処置効果) CATEを用いてATEを推定する CATEで特定のサブグループに対する処置効果の推定 個別処置効果(ITE: Individual Treatment Effect)の推定 目的関数 CATE推定の詳細 分割基準 Causal Treeのフルスクラッチ…

XGBoostとLightGBMの理論の解説

最初に XGboost 1. 目的関数 2. 正則化項 二次近似 もっと詳しく 4.木の成長戦略 詳しく概念的な話 5. 特徴量重要度 LigthGBM 1. Gradient-based One-Side Sampling (GOSS) 2. Exclusive Feature Bundling (EFB) 3. Leaf-wise Tree Growth 最後に 最初に 前…