A/B 有意差分析 & サンプルサイズ計算ツール

確率指標の両側検定 & 検出力分析

WebR 読み込み中…
パラメータ設定

コントロール群

実験群

統計的有意水準 α = 0.050000000000000044

サンプルサイズ計算モード

計算結果

観測相対リフト
p 値
必要サンプル数 / 群
使用例

確率指標テストの例

新しいプッシュ通知の効果をテストしたいとします。現在のクリック率は 5% です。95% の信頼水準で 10% 以上の相対リフトを検出したい場合、下記のサンプルサイズが必要です。

入力パラメータ:
  • • ベースライン転換率:5%
  • • グループ数:2 (コントロール群 + 実験群)
  • • 最小検出可能相対リフト:10%
  • • 信頼水準:95%
期待される結果:
  • • 各群サンプル数:31,234
  • • 総サンプル数:62,468
  • • 検出力:80%