タグ

ブックマーク / www.fallinstar.org (1)

  • これは恐ろしい!全く同じ画面でA/Bテストを実施したら・・・ - Feel Like A Fallinstar

    Webの世界ではもはや数値検証が当たり前になりつつありますが、その前提を揺るがすような最新事例を紹介したいと思います。 ソースは以前採り上げたA/B test.comです。マンガでわかる統計学 trudne.plというサイトのでは、ォーム画面についてのテストで、何と全く同じインターフェースを2つ用意し、50%ずつに振り分けて数値を比較するという試みを行いました。 その画面がこちらです。画面自体は、さほど代わり映えしないフォームですね。 ところが、この画面に約5,000ずつ程度のアクセスを集めてフォームのコンバージョン率を測定したところ・・・ 全く同じ画面でA/Bテストを実施しても、差異が発生 以下が2つ(1つ)の画面の比較結果です。 画面1 7.1% Conversion Rate (4963アクセス、350コンバージョン) 画面2 5.8% Conversion Rate (4952アク

  • 1