A/Bテストを誰に対して行うか、テスト期間をどう見積もるか
A/Bテストを実施する際、訪問するすべてのユーザーを対象にするのではなく、テストにふさわしいターゲティングをするべきでしょう。また、勝者が確定するには、統計上の有意差を判定するのに足りるだけの件数を蓄積するため、それ相応の期間がまずは必要です。A/Bテストのターゲットと期間について取り上げてみます。
続きを読む →A/Bテストを実施する際、訪問するすべてのユーザーを対象にするのではなく、テストにふさわしいターゲティングをするべきでしょう。また、勝者が確定するには、統計上の有意差を判定するのに足りるだけの件数を蓄積するため、それ相応の期間がまずは必要です。A/Bテストのターゲットと期間について取り上げてみます。
続きを読む →小ネタです。Google OptimizeのA/Bテストのパターンごとの細かなサイト利用状況は、Google Analyticsのセグメントを利用すれば把握できます。Google Optimizeの結果だけでなく、Google Analytics側で「副作用」を確認した上で判断できます。
続きを読む →