コンテンツへスキップ

A/Bテストのサンプルサイズ計算機

A/Bテストを始める前に、各バリアントに必要な訪問者数を求めます。ベースラインのコンバージョン率、検出したい最小の相対的改善率、有意水準、統計的検出力を入力してください。

リセット

よくある質問

サンプルサイズはどのように計算されますか?

両側検定で2つの割合を比較する標準的な公式を使います。ベースラインの率、改善後の率、有意水準の臨界値、検出力の値を用いて計算します。

最小検出可能効果とは何ですか?

テストで確実に検出したい最小の相対的な変化です。ベースラインが3%で効果が10%の場合、3.3%への変化を検出することを意味します。

検出力とは何ですか?

効果が実際にある場合に、テストでそれを検出する確率です。80%が一般的な選択肢で、検出力を高くするほど多くの訪問者が必要です。

小さな効果を検出するのに多くの訪問者が必要なのはなぜですか?

必要な標本サイズは、効果の大きさの逆数の二乗にほぼ比例して増えます。検出したい効果を半分にすると、訪問者数は約4倍必要です。

テストにはどれくらい時間がかかりますか?

総標本サイズを1日あたりの訪問者数で割ってください。平日と週末の両方を含めるため、週単位で実施してください。

どの有意水準を選べばよいですか?

通常は95%がデフォルトです。偽陽性のコストが高い場合は99%を使ってください。必要な標本サイズは大きくなります。

OneClick Proについて

OneClick Proは、日々の作業に役立つ150以上のウェブツールを集めた無料コレクションです。画像や単位の変換、コードの整形と検証、ドメインやSEOの確認、テキスト、日付、数値の処理などに利用できます。すべてのツールは登録やサブスクリプションなしで使えます。入力した内容は結果の計算にのみ使用され、保存されることはありません。単発の作業に使える便利なツールボックスとして、または毎日使うツールをブックマークしてご活用ください。