このツールについて
ベースラインコンバージョン率、最小検出効果、統計的有意性水準、統計的検出力を入力して、バリエーションごとに必要なサンプルサイズを計算します。また、完了したテスト結果が統計的に有意かどうかを確認します。
A/Bテストのサンプルサイズと統計的有意性を計算します。コンバージョン率とトラフィックを入力して、実験を実行する期間を決定します。
ベースラインコンバージョン率、最小検出効果、統計的有意性水準、統計的検出力を入力して、バリエーションごとに必要なサンプルサイズを計算します。また、完了したテスト結果が統計的に有意かどうかを確認します。
計算されたサンプルサイズに達するまで、両方のバリエーションでテストを実行してください。これは、トラフィック量、ベースラインコンバージョン率、および検出したい最小効果サイズに依存します。
統計的有意性(通常95%)とは、バリエーション間の観察された差が実際の効果ではなく偶然によるものである確率が5%未満であることを意味します。
MDEは検出したい最小の改善です。MDEが小さいほど、より多くのサンプルサイズが必要です。例えば、1%の改善を検出するには、10%の改善を検出するよりも多くのトラフィックが必要です。
テストバリエーションがGoogleでどのようにランク付けされているかを追跡します。Scavioは、コンバージョンテストと同時にSEOへの影響を監視するためのリアルタイムSERPデータを提供します。