Enviar búsqueda
Cargar
ロジスティック回帰の考え方・使い方 - TokyoR #33
•
147 recomendaciones
•
281,706 vistas
horihorio
Seguir
Tecnología
Denunciar
Compartir
Denunciar
Compartir
1 de 40
Descargar ahora
Descargar para leer sin conexión
Recomendados
Rによるベイジアンネットワーク入門
Rによるベイジアンネットワーク入門
Okamoto Laboratory, The University of Electro-Communications
傾向スコアの概念とその実践
傾向スコアの概念とその実践
Yasuyuki Okumura
20180118 一般化線形モデル(glm)
20180118 一般化線形モデル(glm)
Masakazu Shinoda
2 3.GLMの基礎
2 3.GLMの基礎
logics-of-blue
GEE(一般化推定方程式)の理論
GEE(一般化推定方程式)の理論
Koichiro Gibo
グラフィカル Lasso を用いた異常検知
グラフィカル Lasso を用いた異常検知
Yuya Takashina
統計的因果推論勉強会 第1回
統計的因果推論勉強会 第1回
Hikaru GOTO
質的変数の相関・因子分析
質的変数の相関・因子分析
Mitsuo Shimohata
Recomendados
Rによるベイジアンネットワーク入門
Rによるベイジアンネットワーク入門
Okamoto Laboratory, The University of Electro-Communications
傾向スコアの概念とその実践
傾向スコアの概念とその実践
Yasuyuki Okumura
20180118 一般化線形モデル(glm)
20180118 一般化線形モデル(glm)
Masakazu Shinoda
2 3.GLMの基礎
2 3.GLMの基礎
logics-of-blue
GEE(一般化推定方程式)の理論
GEE(一般化推定方程式)の理論
Koichiro Gibo
グラフィカル Lasso を用いた異常検知
グラフィカル Lasso を用いた異常検知
Yuya Takashina
統計的因果推論勉強会 第1回
統計的因果推論勉強会 第1回
Hikaru GOTO
質的変数の相関・因子分析
質的変数の相関・因子分析
Mitsuo Shimohata
構造方程式モデルによる因果探索と非ガウス性
構造方程式モデルによる因果探索と非ガウス性
Shiga University, RIKEN
第4回DARM勉強会 (構造方程式モデリング)
第4回DARM勉強会 (構造方程式モデリング)
Yoshitake Takebayashi
比例ハザードモデルはとってもtricky!
比例ハザードモデルはとってもtricky!
takehikoihayashi
2 5 1.一般化線形モデル色々_CPUE標準化
2 5 1.一般化線形モデル色々_CPUE標準化
logics-of-blue
Rで学ぶ観察データでの因果推定
Rで学ぶ観察データでの因果推定
Hiroki Matsui
多重代入法の書き方 公開用
多重代入法の書き方 公開用
Koichiro Gibo
因果探索: 基本から最近の発展までを概説
因果探索: 基本から最近の発展までを概説
Shiga University, RIKEN
『バックドア基準の入門』@統数研研究集会
『バックドア基準の入門』@統数研研究集会
takehikoihayashi
Survival analysis0702
Survival analysis0702
Nobuaki Oshiro
Imputation of Missing Values using Random Forest
Imputation of Missing Values using Random Forest
Satoshi Kato
「傾向スコア分析」 報告事例
「傾向スコア分析」 報告事例
Sayuri Shimizu
RでGARCHモデル - TokyoR #21
RでGARCHモデル - TokyoR #21
horihorio
順序データでもベイズモデリング
順序データでもベイズモデリング
. .
機械学習によるデータ分析まわりのお話
機械学習によるデータ分析まわりのお話
Ryota Kamoshida
因果推論の奥へ: "What works" meets "why it works"
因果推論の奥へ: "What works" meets "why it works"
takehikoihayashi
統計的因果推論への招待 -因果構造探索を中心に-
統計的因果推論への招待 -因果構造探索を中心に-
Shiga University, RIKEN
Rで学ぶ 傾向スコア解析入門 - 無作為割り当てが出来ない時の因果効果推定 -
Rで学ぶ 傾向スコア解析入門 - 無作為割り当てが出来ない時の因果効果推定 -
Yohei Sato
DARM勉強会第3回 (missing data analysis)
DARM勉強会第3回 (missing data analysis)
Masaru Tokuoka
StanとRでベイズ統計モデリング読書会 Chapter 7(7.6-7.9) 回帰分析の悩みどころ ~統計の力で歌うまになりたい~
StanとRでベイズ統計モデリング読書会 Chapter 7(7.6-7.9) 回帰分析の悩みどころ ~統計の力で歌うまになりたい~
nocchi_airport
Stan超初心者入門
Stan超初心者入門
Hiroshi Shimizu
今日から使える! みんなのクラスタリング超入門
今日から使える! みんなのクラスタリング超入門
toilet_lunch
SVMについて
SVMについて
mknh1122
Más contenido relacionado
La actualidad más candente
構造方程式モデルによる因果探索と非ガウス性
構造方程式モデルによる因果探索と非ガウス性
Shiga University, RIKEN
第4回DARM勉強会 (構造方程式モデリング)
第4回DARM勉強会 (構造方程式モデリング)
Yoshitake Takebayashi
比例ハザードモデルはとってもtricky!
比例ハザードモデルはとってもtricky!
takehikoihayashi
2 5 1.一般化線形モデル色々_CPUE標準化
2 5 1.一般化線形モデル色々_CPUE標準化
logics-of-blue
Rで学ぶ観察データでの因果推定
Rで学ぶ観察データでの因果推定
Hiroki Matsui
多重代入法の書き方 公開用
多重代入法の書き方 公開用
Koichiro Gibo
因果探索: 基本から最近の発展までを概説
因果探索: 基本から最近の発展までを概説
Shiga University, RIKEN
『バックドア基準の入門』@統数研研究集会
『バックドア基準の入門』@統数研研究集会
takehikoihayashi
Survival analysis0702
Survival analysis0702
Nobuaki Oshiro
Imputation of Missing Values using Random Forest
Imputation of Missing Values using Random Forest
Satoshi Kato
「傾向スコア分析」 報告事例
「傾向スコア分析」 報告事例
Sayuri Shimizu
RでGARCHモデル - TokyoR #21
RでGARCHモデル - TokyoR #21
horihorio
順序データでもベイズモデリング
順序データでもベイズモデリング
. .
機械学習によるデータ分析まわりのお話
機械学習によるデータ分析まわりのお話
Ryota Kamoshida
因果推論の奥へ: "What works" meets "why it works"
因果推論の奥へ: "What works" meets "why it works"
takehikoihayashi
統計的因果推論への招待 -因果構造探索を中心に-
統計的因果推論への招待 -因果構造探索を中心に-
Shiga University, RIKEN
Rで学ぶ 傾向スコア解析入門 - 無作為割り当てが出来ない時の因果効果推定 -
Rで学ぶ 傾向スコア解析入門 - 無作為割り当てが出来ない時の因果効果推定 -
Yohei Sato
DARM勉強会第3回 (missing data analysis)
DARM勉強会第3回 (missing data analysis)
Masaru Tokuoka
StanとRでベイズ統計モデリング読書会 Chapter 7(7.6-7.9) 回帰分析の悩みどころ ~統計の力で歌うまになりたい~
StanとRでベイズ統計モデリング読書会 Chapter 7(7.6-7.9) 回帰分析の悩みどころ ~統計の力で歌うまになりたい~
nocchi_airport
Stan超初心者入門
Stan超初心者入門
Hiroshi Shimizu
La actualidad más candente
(20)
構造方程式モデルによる因果探索と非ガウス性
構造方程式モデルによる因果探索と非ガウス性
第4回DARM勉強会 (構造方程式モデリング)
第4回DARM勉強会 (構造方程式モデリング)
比例ハザードモデルはとってもtricky!
比例ハザードモデルはとってもtricky!
2 5 1.一般化線形モデル色々_CPUE標準化
2 5 1.一般化線形モデル色々_CPUE標準化
Rで学ぶ観察データでの因果推定
Rで学ぶ観察データでの因果推定
多重代入法の書き方 公開用
多重代入法の書き方 公開用
因果探索: 基本から最近の発展までを概説
因果探索: 基本から最近の発展までを概説
『バックドア基準の入門』@統数研研究集会
『バックドア基準の入門』@統数研研究集会
Survival analysis0702
Survival analysis0702
Imputation of Missing Values using Random Forest
Imputation of Missing Values using Random Forest
「傾向スコア分析」 報告事例
「傾向スコア分析」 報告事例
RでGARCHモデル - TokyoR #21
RでGARCHモデル - TokyoR #21
順序データでもベイズモデリング
順序データでもベイズモデリング
機械学習によるデータ分析まわりのお話
機械学習によるデータ分析まわりのお話
因果推論の奥へ: "What works" meets "why it works"
因果推論の奥へ: "What works" meets "why it works"
統計的因果推論への招待 -因果構造探索を中心に-
統計的因果推論への招待 -因果構造探索を中心に-
Rで学ぶ 傾向スコア解析入門 - 無作為割り当てが出来ない時の因果効果推定 -
Rで学ぶ 傾向スコア解析入門 - 無作為割り当てが出来ない時の因果効果推定 -
DARM勉強会第3回 (missing data analysis)
DARM勉強会第3回 (missing data analysis)
StanとRでベイズ統計モデリング読書会 Chapter 7(7.6-7.9) 回帰分析の悩みどころ ~統計の力で歌うまになりたい~
StanとRでベイズ統計モデリング読書会 Chapter 7(7.6-7.9) 回帰分析の悩みどころ ~統計の力で歌うまになりたい~
Stan超初心者入門
Stan超初心者入門
Destacado
今日から使える! みんなのクラスタリング超入門
今日から使える! みんなのクラスタリング超入門
toilet_lunch
SVMについて
SVMについて
mknh1122
バンディットアルゴリズム入門と実践
バンディットアルゴリズム入門と実践
智之 村上
決定木学習
決定木学習
Mitsuo Shimohata
機会学習ハッカソン:ランダムフォレスト
機会学習ハッカソン:ランダムフォレスト
Teppei Baba
はじめてでもわかるベイズ分類器 -基礎からMahout実装まで-
はじめてでもわかるベイズ分類器 -基礎からMahout実装まで-
Naoki Yanai
パターン認識 第10章 決定木
パターン認識 第10章 決定木
Miyoshi Yuya
トピックモデルを用いた 潜在ファッション嗜好の推定
トピックモデルを用いた 潜在ファッション嗜好の推定
Takashi Kaneda
Simple perceptron by TJO
Simple perceptron by TJO
Takashi J OZAKI
一般向けのDeep Learning
一般向けのDeep Learning
Preferred Networks
Tokyo.R 41 サポートベクターマシンで眼鏡っ娘分類システム構築
Tokyo.R 41 サポートベクターマシンで眼鏡っ娘分類システム構築
Tatsuya Tojima
「はじめてでもわかる RandomForest 入門-集団学習による分類・予測 -」 -第7回データマイニング+WEB勉強会@東京
「はじめてでもわかる RandomForest 入門-集団学習による分類・予測 -」 -第7回データマイニング+WEB勉強会@東京
Koichi Hamada
機械学習チュートリアル@Jubatus Casual Talks
機械学習チュートリアル@Jubatus Casual Talks
Yuya Unno
Rによるデータサイエンス13「樹木モデル」
Rによるデータサイエンス13「樹木モデル」
Takeshi Mikami
30分でわかる『R』によるデータ分析|データアーティスト
30分でわかる『R』によるデータ分析|データアーティスト
Satoru Yamamoto
Newman アルゴリズムによるソーシャルグラフのクラスタリング
Newman アルゴリズムによるソーシャルグラフのクラスタリング
Atsushi KOMIYA
Pythonとdeep learningで手書き文字認識
Pythonとdeep learningで手書き文字認識
Ken Morishita
scikit-learnを用いた機械学習チュートリアル
scikit-learnを用いた機械学習チュートリアル
敦志 金谷
Pythonで機械学習入門以前
Pythonで機械学習入門以前
Kimikazu Kato
ルールベースから機械学習への道 公開用
ルールベースから機械学習への道 公開用
nishio
Destacado
(20)
今日から使える! みんなのクラスタリング超入門
今日から使える! みんなのクラスタリング超入門
SVMについて
SVMについて
バンディットアルゴリズム入門と実践
バンディットアルゴリズム入門と実践
決定木学習
決定木学習
機会学習ハッカソン:ランダムフォレスト
機会学習ハッカソン:ランダムフォレスト
はじめてでもわかるベイズ分類器 -基礎からMahout実装まで-
はじめてでもわかるベイズ分類器 -基礎からMahout実装まで-
パターン認識 第10章 決定木
パターン認識 第10章 決定木
トピックモデルを用いた 潜在ファッション嗜好の推定
トピックモデルを用いた 潜在ファッション嗜好の推定
Simple perceptron by TJO
Simple perceptron by TJO
一般向けのDeep Learning
一般向けのDeep Learning
Tokyo.R 41 サポートベクターマシンで眼鏡っ娘分類システム構築
Tokyo.R 41 サポートベクターマシンで眼鏡っ娘分類システム構築
「はじめてでもわかる RandomForest 入門-集団学習による分類・予測 -」 -第7回データマイニング+WEB勉強会@東京
「はじめてでもわかる RandomForest 入門-集団学習による分類・予測 -」 -第7回データマイニング+WEB勉強会@東京
機械学習チュートリアル@Jubatus Casual Talks
機械学習チュートリアル@Jubatus Casual Talks
Rによるデータサイエンス13「樹木モデル」
Rによるデータサイエンス13「樹木モデル」
30分でわかる『R』によるデータ分析|データアーティスト
30分でわかる『R』によるデータ分析|データアーティスト
Newman アルゴリズムによるソーシャルグラフのクラスタリング
Newman アルゴリズムによるソーシャルグラフのクラスタリング
Pythonとdeep learningで手書き文字認識
Pythonとdeep learningで手書き文字認識
scikit-learnを用いた機械学習チュートリアル
scikit-learnを用いた機械学習チュートリアル
Pythonで機械学習入門以前
Pythonで機械学習入門以前
ルールベースから機械学習への道 公開用
ルールベースから機械学習への道 公開用
Más de horihorio
分析のビジネス展開を考える―状態空間モデルを例に @TokyoWebMining #47
分析のビジネス展開を考える―状態空間モデルを例に @TokyoWebMining #47
horihorio
セグメンテーションの考え方・使い方 - TokyoR #44
セグメンテーションの考え方・使い方 - TokyoR #44
horihorio
統計と会計 - Zansa#19
統計と会計 - Zansa#19
horihorio
補足資料 財務3表の基礎知識
補足資料 財務3表の基礎知識
horihorio
状態空間モデルの考え方・使い方 - TokyoR #38
状態空間モデルの考え方・使い方 - TokyoR #38
horihorio
第6章 2つの平均値を比較する - TokyoR #28
第6章 2つの平均値を比較する - TokyoR #28
horihorio
時系列解析の使い方 - TokyoWebMining #17
時系列解析の使い方 - TokyoWebMining #17
horihorio
Rで学ぶ現代ポートフォリオ理論入門 - TokyoR #18
Rで学ぶ現代ポートフォリオ理論入門 - TokyoR #18
horihorio
Más de horihorio
(8)
分析のビジネス展開を考える―状態空間モデルを例に @TokyoWebMining #47
分析のビジネス展開を考える―状態空間モデルを例に @TokyoWebMining #47
セグメンテーションの考え方・使い方 - TokyoR #44
セグメンテーションの考え方・使い方 - TokyoR #44
統計と会計 - Zansa#19
統計と会計 - Zansa#19
補足資料 財務3表の基礎知識
補足資料 財務3表の基礎知識
状態空間モデルの考え方・使い方 - TokyoR #38
状態空間モデルの考え方・使い方 - TokyoR #38
第6章 2つの平均値を比較する - TokyoR #28
第6章 2つの平均値を比較する - TokyoR #28
時系列解析の使い方 - TokyoWebMining #17
時系列解析の使い方 - TokyoWebMining #17
Rで学ぶ現代ポートフォリオ理論入門 - TokyoR #18
Rで学ぶ現代ポートフォリオ理論入門 - TokyoR #18
Último
Postman LT Fukuoka_Quick Prototype_By Daniel
Postman LT Fukuoka_Quick Prototype_By Daniel
danielhu54
新人研修のまとめ 2024/04/12の勉強会で発表されたものです。
新人研修のまとめ 2024/04/12の勉強会で発表されたものです。
iPride Co., Ltd.
IoT in the era of generative AI, Thanks IoT ALGYAN.pptx
IoT in the era of generative AI, Thanks IoT ALGYAN.pptx
Atomu Hidaka
Amazon SES を勉強してみる その12024/04/12の勉強会で発表されたものです。
Amazon SES を勉強してみる その12024/04/12の勉強会で発表されたものです。
iPride Co., Ltd.
プレイマットのパターン生成支援ツール
プレイマットのパターン生成支援ツール
sugiuralab
20240412_HCCJP での Windows Server 2025 Active Directory
20240412_HCCJP での Windows Server 2025 Active Directory
osamut
プレイマットのパターン生成支援ツールの評価
プレイマットのパターン生成支援ツールの評価
sugiuralab
PHP-Conference-Odawara-2024-04-000000000
PHP-Conference-Odawara-2024-04-000000000
Shota Ito
Último
(8)
Postman LT Fukuoka_Quick Prototype_By Daniel
Postman LT Fukuoka_Quick Prototype_By Daniel
新人研修のまとめ 2024/04/12の勉強会で発表されたものです。
新人研修のまとめ 2024/04/12の勉強会で発表されたものです。
IoT in the era of generative AI, Thanks IoT ALGYAN.pptx
IoT in the era of generative AI, Thanks IoT ALGYAN.pptx
Amazon SES を勉強してみる その12024/04/12の勉強会で発表されたものです。
Amazon SES を勉強してみる その12024/04/12の勉強会で発表されたものです。
プレイマットのパターン生成支援ツール
プレイマットのパターン生成支援ツール
20240412_HCCJP での Windows Server 2025 Active Directory
20240412_HCCJP での Windows Server 2025 Active Directory
プレイマットのパターン生成支援ツールの評価
プレイマットのパターン生成支援ツールの評価
PHP-Conference-Odawara-2024-04-000000000
PHP-Conference-Odawara-2024-04-000000000
ロジスティック回帰の考え方・使い方 - TokyoR #33
1.
ロジスティック回帰の 考え方・使い方 TokyoR #33 2013/8/31 @horihorio
2.
自己紹介 1 / 392013/8/31 •
Twitter ID: @horihorio • お仕事: 分析コンサルタント • 興味: 統計色々/DB/R/Finance/金融業/会計 • 過去の発表: ここ • 最近の出来事 • 金融業以外の分析にも進出 • だが何故か証券アナリストを取った • 優秀な人のマネジメントっぽい事を • 息子が1歳になった ロジスティック回帰の考え方・使い方
3.
今回の想定ケース 2 / 392013/8/31
ロジスティック回帰の考え方・使い方 • 旅行代理店勤務 マーケティング部所属3年目 • 「Rによるやさしい統計学」で Rの操作、線形回帰に慣れた • 上司(超文系)に 「いつもツアーの案内DM送っているけど、 もっと上手い送り方って考えてくれない?」 と言われた。どうしよう…
4.
紹介すること 3 / 392013/8/31
ロジスティック回帰の考え方・使い方 データ: customers でロジスティック回帰 glm(hit ~ sex + age + income + (略) , data = customers , family = binomial (link = "logit") ) をする前に考えること の一部です。 hit sex age income … 0 Female 32 520 … 1 Male 24 340 … 0 Male 39 580 … … … … …
5.
紹介しないこと 4 / 392013/8/31
ロジスティック回帰の考え方・使い方 1. Rの色々な操作 2. 数学、統計学の理論 ! 別の本や資料を見て下さい !
6.
モノの作り方 5 / 392013/8/31
ロジスティック回帰の考え方・使い方 自動車の作り方 を何回も、行きつ戻りつ、繰り返す。 出典:門外漢の妄想 1. 設計する 2. 車を作る 3. 機器で検査 4. テストコースで検査
7.
6 / 392013/8/31
ロジスティック回帰の考え方・使い方 自動車の作り方 モデルの作り方 を何回も、行きつ戻りつ、繰り返す。 1. 設計する 2. 車を作る 3. 機器で検査 4. テストコースで検査 1. 設計する 2. モデルを作る 3. 検証データで検査 4. 実ビジネスで検査 モノの作り方
8.
アジェンダ 7 / 392013/8/31
ロジスティック回帰の考え方・使い方 1 ロジスティック回帰で良いの? • その他の方法もない? • 相手はどんな方ですか? 2 ロジスティック回帰の仕上がり図 • 仕上がりから逆算して考えてみると 3 結果の検証方法 • モデルをつくったら、きちんと検査を 4 データ加工方法の例 • 回帰モデルは加工が大変デス… その一旦を紹介します 作り方1. モデル設計 作り方1. モデル設計 作り方2. モデル作成 作り方3. 4. モデル検証
9.
8 / 392013/8/31
ロジスティック回帰の考え方・使い方 1.ロジスティック回帰で良いの?
10.
欲しい結果:DMに反応する確率(0~1) DMの発送って? ご存知:線形回帰モデル • 入力:性別、年齢、購買履歴、… • 出力:購入額、とか 0~1でない なんか違う… 9
/ 392013/8/31 ロジスティック回帰の考え方・使い方
11.
欲しい結果:DMに反応する確率(0~1) DMの発送って? 線形回帰モデル • 入力:性別、年齢、購買履歴、… • 出力:購入額 ロジスティック回帰モデル •
入力:性別、年齢、購買履歴、… • 出力: DMに反応する確率 ⇒0.5以上(例えば)はDMに反応、と考える 0~1の値 10 / 392013/8/31 ロジスティック回帰の考え方・使い方 こっち
12.
○×とに分類したい ⇒ 識別モデル ただ、識別モデルって他にもある 他にも方法はある 代表的なところ •
ロジスティック回帰 • 決定木 • ランダムフォレスト • ニューラルネット • SVM (Support Vector Machine) などなど 11 / 392013/8/31 ロジスティック回帰の考え方・使い方
13.
判断基準は色々山ほど。万能な基準はない。 どのモデルを選べばいいの? • 当たるか? ⇒高度な技術?は精度UP、分かりやすさはDOWN… • いつも同じ結果が出るか? ⇒毎回違う結果が出るモデルも… •
データ加工の手間は? ⇒前処理が 相当必要~ほぼ不要 までイロイロ • モデルが解釈出来る/し易いか? ⇒ブラックボックスなモデルもあり • チューニングの余地があるか? ⇒「チューニング出来ないモデルが散々な結果」への恐怖… 12 / 392013/8/31 ロジスティック回帰の考え方・使い方
14.
ビジネスならば:「説明する相手を考える」 提案する基準 ※出典:私の独断と偏見 13 / 392013/8/31
ロジスティック回帰の考え方・使い方 モデル 技術が ある 相手は… 技術が ない 相手は… 結果の 要因 追求 分析 工数 ロジスティック回帰 正面勝負か 分かる気も 可能 大 決定木 恥ずかしくネw よく分かる♪ えw 小 ランダムフォレスト 忙しかった? 結果だけなら よーく 分かった 難しい 小 ニューラル ネットワーク 結果が欲し かったのね 無理 小~中 SVM 好きですね… 難しい 中
15.
結果に至った理由が知りたい場合 私がロジスティック回帰を選ぶ場合 14 / 392013/8/31
ロジスティック回帰の考え方・使い方 モデル 技術が ある 相手は… 技術が ない 相手は… 結果の 要因 追求 分析 工数 ロジスティック回帰 正面勝負か 分かる気も 可能 大 決定木 恥ずかしくネw よく分かる♪ えw 小 ランダムフォレスト 忙しかった? 結果だけなら よーく 分かった 難しい 小 ニューラル ネットワーク 結果が欲し かったのね 無理 小~中 SVM 好きですね… 難しい 中 ココに注目
16.
15 / 392013/8/31
ロジスティック回帰の考え方・使い方 2.ロジスティック回帰の仕上がり図
17.
※普段は、もう少し分かりやすく&マトモに書きます… 最低限伝えるメッセージ 説明の例 16 / 392013/8/31
ロジスティック回帰の考え方・使い方 重要度 採用変数 有意確率 オッズ比 1 年収_百万 0.1% 1.12 2 年齢_50代 0.5% 0.82 3 性別_女性 1.2% 1.32 … … … … - 切片 0.3% -
18.
説明の例 ※普段は、もう少し分かりやすく&マトモに書きます… 17 / 392013/8/31
ロジスティック回帰の考え方・使い方 重要度 採用変数 有意確率 オッズ比 1 年収_百万 0.1% 1.12 2 年齢_50代 0.5% 0.82 3 性別_女性 1.2% 1.32 … … … … - 切片 0.3% - 有意確率の 小さい順 係数が本来はゼロ (つまり意味なし) である確率 (その他比で) 確率が…倍になる 最低限伝えるメッセージ
19.
R出力との対応 18 / 392013/8/31
ロジスティック回帰の考え方・使い方 重要度 採用変数 有意確率 オッズ比 1 年収_百万 0.1% 1.12 2 年齢_50代 0.5% 0.82 3 性別_女性 1.2% 1.32 … … … … - 切片 0.3% - 結果のsummaryの抜粋 Coefficients: Estimate Std. Error z value Pr(>|z|) (Intercept) -1.978 … … 0.003 sex_femail 0.278 … … 0.012 age_50th -0.198 … … 0.005 income 0.113 … … 0.001 … exp(Estimate) の値
20.
色々変数が採用されているけど、 上位にある程、重要なファクターです ってのは、割合話がしやすい気が。 解説は他の資料を! 有意確率って? 19 / 392013/8/31
ロジスティック回帰の考え方・使い方 重要度 採用変数 有意確率 オッズ比 1 年収_百万 0.1% 1.12 2 年齢_50代 0.5% 0.82 3 性別_女性 1.2% 1.32 … … … … - 切片 0.3% -
21.
だけど一応、軽く解説: オッズ比 ⇒ 「他と比べて確率がx倍」
を表す指標 【右上図での解釈例】 • カテゴリー変数の場合 女性ならば(対男性比で)DM反応率が1.32倍増加 • 連続変数の場合 年収が100万円増えると、DM反応率が1.12倍増加 解説は他の資料を! オッズ比って? 20 / 392013/8/31 ロジスティック回帰の考え方・使い方 重要度 採用変数 有意確率 オッズ比 1 年収_百万 0.1% 1.12 2 年齢_50代 0.5% 0.82 3 性別_女性 1.2% 1.32 … … … … - 切片 0.3% -
22.
普通にコマンド打つだけだと: 例えば100変数入れると、 効かない変数でも、何かの値が出る その結果: 90代のDM反応率が53.2倍だぜ! ( ゚Д゚)ウヒョー!!! ##### 有意確率が87.3%ですが…
##### などなど…な雑談で、会議が迷走&紛糾の予感。 【少々脱線】 21 / 392013/8/31 ロジスティック回帰の考え方・使い方
23.
なにしてるの? 1. 信用できる(有意確率が低い)変数を1つずつ追加 2. 追加するものが無くなったら、そこで打ち止め ※色々バリエーションはあるけど、省略 とすると、100変数のうち 信用出来る変数のみのモデルが完成 ###
で、会議の紛糾が回避出来る。 Rでの方法: step, stepAIC を調べて下さい。 なので ステップワイズ変数選択を推奨 【少々脱線】 22 / 392013/8/31 ロジスティック回帰の考え方・使い方
24.
23 / 392013/8/31
ロジスティック回帰の考え方・使い方 3.結果の検証方法
25.
24 / 392013/8/31
ロジスティック回帰の考え方・使い方 自動車の作り方 モデルの作り方 を何回も、行きつ戻りつ、繰り返す。 1. 設計する 2. 車を作る 3. 機器で検査 4. テストコースで検査 1. 設計する 2. モデルを作る 3. 検証データで検査 4. 実ビジネスで検査 モノの作り方 再掲 ココの話
26.
方法1.データを構築用・検証用に分割(数字は一例です) モデル投入データで精度を出すのは(ある意味)簡単 大事なのは、投入以外のデータで検査すること 作り方の3. 検証データで検査 25 /
392013/8/31 ロジスティック回帰の考え方・使い方 構築データ:80% 検証データ:20% 精度 比較 時間
27.
方法2.あえて最新データを使わない 作り方の3. 検証データで検査 26 /
392013/8/31 ロジスティック回帰の考え方・使い方 時間 構築データ 検証 データ 精度比較
28.
方法3.クロス・バリデーション ※これも一例です 作り方の3. 検証データで検査 27 /
392013/8/31 ロジスティック回帰の考え方・使い方 No.1 #1 #2 #3 #4 #5 #6 #7 #8 #9 #10 ⇒ 精度1 No.2 #1 #2 #3 #4 #5 #6 #7 #8 #9 #10 ⇒ 精度2 No.3 #1 #2 #3 #4 #5 #6 #7 #8 #9 #10 ⇒ 精度3 … … … No.10 #1 #2 #3 #4 #5 #6 #7 #8 #9 #10 ⇒ 精度10 構築データ 検証データ 構築データの 精度と比較
29.
作り方の3. 検証データで検査 28 /
392013/8/31 ロジスティック回帰の考え方・使い方 で問題: 精度検証ってなに? 杓子定規な基準はない。 教科書にありがち: CAP図、AR値 • 不適当 • 悪くないけどベストでない な場合も多々。 統計知識、データ抽出・加工技術、業界・業務知識 等々の総合力勝負だったり。
30.
必要なもの例 1. 統計的知識 2. データ抽出・加工技術 3.
業界・業務知識 4. 各利害関係者との折衝能力 ビジネスの状況によりけり。おもいっきり難しい。 作り方の4. 実ビジネスで検査 29 / 392013/8/31 ロジスティック回帰の考え方・使い方
31.
30 / 392013/8/31
ロジスティック回帰の考え方・使い方 4.データ加工方法の例
32.
言いたいこと 31 / 392013/8/31
ロジスティック回帰の考え方・使い方 • 精度を出すコツは、データの前処理 • 回帰モデルは特にデータ加工が命 その一端を紹介します。 ※詳細はノウハウの塊 ほぼ開示されない 私もゴニョゴニョ
33.
列「会員加入申込」は、 Web、郵送、電話、その他 のどれかがある そのまま投入すると、面倒くさい話が発生。 1. カテゴリ変数の扱い 32
/ 392013/8/31 ロジスティック回帰の考え方・使い方 採用変数 有意確率 オッズ比 会員加入申込. Web 0.3% 1.47 会員加入申込. 郵送 2.4% 0.69 会員加入申込. 電話 13.3% 0.92 会員加入申込. その他 65.2% 1.00 基準が選べない怪しいのが混入
34.
• 会員加入申込_Web: Webならば1、非該当は0 •
会員加入申込_郵送: 郵送ならば1、非該当は0 • 会員加入申込_電話: 電話ならば1、非該当は0 • 会員加入申込_その他:その他ならば1、非該当は0 例えば、caretパッケージの dummyVars が便利 対応法:(1)各々の変数を作る 1. カテゴリ変数の扱い 33 / 392013/8/31 ロジスティック回帰の考え方・使い方
35.
• 会員加入申込_Web: Webならば1、非該当は0 •
会員加入申込_郵送: 郵送ならば1、非該当は0 • 会員加入申込_電話: 電話ならば1、非該当は0 • 会員加入申込_その他:その他ならば1、非該当は0 何を基準にすれば良い? ⇒ 業務の理解、ヒヤリング力のお話な 対応法:(2)基準としたい変数以外でステップワイズ 1. カテゴリ変数の扱い 34 / 392013/8/31 ロジスティック回帰の考え方・使い方 郵送比でxx倍が 見たいので非投入
36.
非常に大変。無加工だとこうなる 2. 曲線傾向の扱い方 35 /
392013/8/31 ロジスティック回帰の考え方・使い方 年齢 DM反応率 モデル 推定結果 実際の 年齢別反応率 ※実際は直線でないが…
37.
どう切るのか? どこを基準にするのか? ⇒ 業務の理解、ヒヤリング力のお話な ※注:これは初心者向け 対応な気が •
20歳未満 • 20代 … • 60代 • 70歳以上 推奨法:ビンニングをして、カテゴリ変数の扱いで ⇒ 各カテゴリはx倍、で曲線傾向を表現 2. 曲線傾向の扱い方 36 / 392013/8/31 ロジスティック回帰の考え方・使い方 これを基準に
38.
• 外れ値の対応、処理 • 数値のスケール(例:金額は百万単位) •
変換(例:対数、ルート、log) • (30代等の)特定のカテゴリのみに効く変数の扱い • オッズ比が1以上/以下 に納得感があるか …まだまだ挙げればキリナイです キッチリ回帰モデルをするのは大変 by ワタシの実感 その他の考慮事項 37 / 392013/8/31 ロジスティック回帰の考え方・使い方
39.
38 / 392013/8/31
ロジスティック回帰の考え方・使い方 まとめ
40.
というか、言いたかったこと 39 / 392013/8/31
ロジスティック回帰の考え方・使い方 ビジネスの場合 • 分析して儲かる • 相手が納得する が大前提。 で • 2度の翻訳の妥当性 • 「1から2」&「AからB」の両方が妥当か の両方を詰めるのは大変、だけど面白いです。 1. ビジネスの問題を A) 数学の問題に翻訳し B) 問題を数学的に解いて 2. 再度ビジネス世界に翻訳
Descargar ahora