A/Bテストの進化 - ワザノバ | wazanova

http://developers.lyst.com/data/2014/05/10/bayesian-ab-testing/ 1 comment | 0 points | by WazanovaNews ■ comment by Jshiike | 約6時間前 「Airbnb: 最も利用されている機能がベストだとは限らない」を紹介した際に、疑問として残っていたポイントについて、その後フォローアップの情報になるブログがいくつか続いています。 まずは、Airbnbのブログで、信頼性を表すP値が5%以内では安定せず、かつ中期的な予約率改善率の計測でも効果はニュートラルと出た（計測結果のグラフ）価格帯スライダーバーを、最終的には変更すると判断をしたのは、予想とおり「高い価格帯を検索して予約をするユーザがいたから」、つまり総手数料売上があがるという別のKPIを考慮しての判断でした。 また、Air