「施策を打ったらKPIが上がった！」だけで満足するのは危険 - 渋谷駅前で働くデータサイエンティストのブログ

ソーシャル（特にソシャゲ）界隈の業界では未だによく聞こえてくる話が、 「毎日毎週施策を打つたびにしっかりKPIが上がってるのは見えてるのに、半年後とかの数字見るとなーんか芳しくないんだよね。何でだろう？」 という不思議な愚痴。このブログを初期の頃から読んでいる人なら知っての通り、それを聞くなり「平均への回帰」とか「見せかけの回帰」とかにやられてるよなー、と僕なんかは思うわけですが。最近またそういう話を業界内で見聞きする機会が増えてきたので、改めてまとめてみます。 何でこうなってしまうのか？ ここでは一つありがちなパターンを見てみましょう。例えばDAUか何かのKPIを想像してみます。施策をA, B, Cと3種類ぐらい持っていて、コストや工数を考えながら投入していく感じです。 施策A1、施策A2を打てばそれなりにDAUが上がって、ここで有効期間の長い施策B1を打ってみたら右肩上がりに上がった！

[rAdio]

KPIがKey Performanceを示していないという問題。

[teppeis]

「施策は打ったがKPIがない！」よりはマシ。

[tadaken3]

”施策を打ったらKPIが「上がったかどうか」だけではなく、「ベースラインまで押し上げたかどうか」を見る。施策を打つごとに上記ポイントを確認して、出来る限りこれに当てはまる施策を選別して打っていく。”それな

[takuyakamiyama24]

わかりやすい

[yo-11-06]

あるあるやな

[oinume]

説明がわかりやすい

[g08m11]

[

[uzuki-first]

施策を打ったらKPIが「上がったかどうか」だけではなく、「ベースラインまで押し上げたかどうか」（高止まりしているか）を見る

[basseyboost]

「施策を打ったらKPIが上がった！」だけで満足するのは危険 - 道玄坂で働くデータサイエンティストのブログ

[Okky]

施策によって大事なことは底上げすること

[muchikin]

身につまされるわー。

[pyonchan1515]

「施策を打ったらKPIが上がった！」だけで満足するのは危険 - 道玄坂で働くデータサイエンティストのブログ

[tettu0402]

分かってはいるけど難しいよね…

[sugimori]

すごいありそう

[managami]

「平均への回帰」「見せかけの回帰」

[botyuki]

「施策を打ったらKPIが上がった！」だけで満足するのは危険 - 道玄坂で働くデータサイエンティストのブログ