A/Bテストは意味がない？というお話 | SEM-LABO先日、アクセス解析やリスティング広告に精通している方とお話した時に出たお話で、「A/Bテストは意味がない」というお話が実に興味深く、非常に面白かったので書き出してみたいと思います。 ※ちなみに僕自身の意見としてはやり方次第でA/Bテストは有効だと思っていますし、現在進行形で実際に実行しています。 Q, A/Bテストを1か月ほど繰り返すうちに閲覧開始ページからのコンバージョン推移をみていると、1か月通してみればAのコンバージョン率が優れていたが、前半の半月だけで計測するとBの方がコンバージョン率が優れていたりする場合は、どちらのデータを信用するべきなのか？ ※勿論、半月経過の時点で信頼性のあるデータは取得されています。 こういった問題にはみなさんも出くわしたことがあるのではないでしょうか？A/Bテストのデータをある一定期間追いかけ続けていると頻繁にこういう傾向になる場合があります。 ではなぜ
Typhooon
