A/Bテスト サンプルサイズ計算ツール

「A/Bテスト サンプルサイズ計算ツール」は、A/Bテストを実施する際に、統計的に信頼性の高い結果を得るために必要な「最適なサンプルサイズ（テスト対象のユーザー数など）」を算出するツールです。

事前に最適なサンプルサイズを把握することで、「どのくらいのユーザーを集めればよいか」「テストを何日間実施すればよいか」といった計画を立てることができます。

コンバージョン率と期待する改善率を入力することで、各バージョン（AおよびB）の必要なサンプルサイズと日数の目安を算出します（有意性95%・検出力80%を標準）。

標準設定：有意性95%（α=0.05）・検出力80%・検定 両側・配分 1:1

• 有意性 95% (α=0.05, significance level)：偶然で差が出るのを5%まで許す設定。両側検定では左右2.5%ずつ
• 検出力 (power) 80%：本当に差があるときに有意差が出る確率

使い方

「現在のユーザーコンバージョン率」「期待する改善率（相対）」「1日のユーザー数（任意）」の値をフォームに入力し、「計算する」ボタンを押してください。結果エリアに各バージョン（AおよびB）の必要サンプル数、A+Bの合計、想定テスト期間が表示されます。

免責事項

• 「A/Bテスト サンプルサイズ計算ツール」に入力されたデータは、一切保存および計測をしておりません。
• 「A/Bテスト サンプルサイズ計算ツール」は十分に検証した上で提供しておりますが、その動作や結果について正確性を完全に保証するものではありません。このツールを利用することによって生じるいかなる損害について、一切の責任を負わないものとします。
• 広告ブロッカーのブラウザーアドオン（拡張機能）やアプリを使用している場合、正しく機能しない場合があります。
• 仕様、結果などに関するお問い合わせにはお答えいたしかねます。

関連記事、ツール

あわせて使いたい

A/Bテスト信頼度判定ツール（有意差判定） 「A/Bテスト信頼度判定ツール」は、A/Bテストで得られたデータについて「結果に有意な差が出ているか」「誤差なのか」を簡易的に判定するためのツールです。

関連記事

A/Bテストを誰に対して行うか、テスト期間をどう見積もるか A/Bテストを実施する際、すべてのユーザーを対象にするのではなく、テストにふさわしいターゲティングをするべきでしょう。また、勝者が確定するには、統計上の有意差を判定するのに足りるだけの件数を蓄積するため、それ相応の期間がまずは必要です。

2025年10月15日公開