Web広告でクリエイティブや広告文を改善するときに利用するのが、A/Bテストです。
例えば、画像Aと画像Bを配信し、どちらが成果につながるかを比較します。
ここで迷いやすいのが「何日間テストすればよいのか」という問題です。
3日、7日、2週間など、さまざまな目安がありますが、すべての広告に共通する終了日数はありません。
広告媒体だけでなく、広告予算やCV数、成果が発生するまでの時間によって、必要な期間が変わるためです。
今回は、広告媒体ごとの違いと、A/Bテストの終了基準を整理します。
この記事で分かること
- A/Bテストを日数だけで終了できない理由
- 広告媒体ごとの推奨期間
- 予算とCV数から判断する方法
- 少額運用での終了条件の決め方
A/Bテストは日数だけで判断しない
例えば、広告AとBを3日間配信した結果が次のとおりだったとします。
広告A:CV2件
広告B:CV0件
この結果だけでAが優れていると断定するのは早いでしょう。
偶然Aで成果が発生した可能性もあるためです。
反対に、30日間配信しても両方のCVがほとんどなければ、比較する材料は不足しています。
つまり、重要なのは経過日数ではなく、判断に必要なデータが集まっているかです。
また、曜日によって利用者の行動が変わる場合もあります。
そのため、1週間を一つの観察単位にする考え方はありますが、7日経過すれば必ず終了できるわけではありません。
広告媒体によって推奨期間は違う?
A/Bテストの期間は、広告媒体や実験機能によって異なります。
| 広告媒体 | 期間の考え方 |
|---|---|
| Meta広告 | まず1週間程度を観察の目安とし、データ量で判断 |
| TikTok広告 | 公式スプリットテストでは最低7日を推奨 |
| X広告 | 公式A/Bテストでは少なくとも2週間を推奨 |
| Google広告 | 実験の種類によって2〜3週間、4〜6週間以上など |
| YouTube広告 | Google広告の動画実験など、実験方式に応じて判断 |
Meta広告の「1週間」は、すべてのA/Bテストに適用される公式の終了基準ではありません。
Google広告も実験の種類によって推奨期間が異なります。結果が不明確な実験では2〜3週間、Performance Maxなど一部の実験では4〜6週間以上が案内されています。
また、通常の広告を2本配信して比較する方法と、媒体が用意する正式なA/Bテスト機能は異なります。
正式な実験では、比較条件や配信対象を調整して、結果の信頼性を高める仕組みが用意されています。
広告予算から終了基準を考える
少額運用では、日数と同じくらい広告費が重要です。
例えば、目標CPAが10,000円の案件を考えます。
広告Bに3,000円使ってCVが0件でも、まだ目標CPAの3分の1しか使っていません。
一方、50,000円使ってCVが0件なら、継続するか慎重に判断する必要があります。
ただし、目標CPAの何倍使えば必ず停止するという共通ルールはありません。
案件の収益性やクリック数、CVまでの時間を考慮して、事前に許容できるテスト費用を決めます。
また、目標CPAが高い案件では、少ない予算を多くの広告へ分散すると、どの広告も十分に検証できない場合があります。
CV数が少ないと結果は不安定になる
A/Bテストでは、CV数も重要な判断材料です。
例えば、次の2つの結果を比較します。
| 指標 | ケース① | ケース② |
|---|---|---|
| 広告A | CV2件・CPA8,000円 | CV20件・CPA8,000円 |
| 広告B | CV1件・CPA13,000円 | CV20件・CPA13,000円 |
ケース①は成果件数が少なく、偶然の影響を受けやすい状態です。
ケース②は比較材料が増えていますが、それだけで統計的に有意な差があると断定できるわけではありません。
必要なCV数は、比較したい差の大きさやデータのばらつきなどによって変わります。
正式なA/Bテストでは、可能であれば媒体の実験結果や信頼区間も確認します。
CVが少ない場合は中間指標も確認する
成果報酬が高いアフィリエイト案件などでは、短期間に十分なCVを集めるのが難しい場合があります。
そのときは、CTRやCPC、LPへの遷移率なども参考になります。
例えば、広告AのCTRが2.0%、広告Bが0.5%だったとします。
十分な表示回数があれば、Aの方がクリックを集めやすいという仮説を立てられます。
ただし、CTRが高い広告が、必ずしもCPAの低い広告とは限りません。
クリック後にCVしなければ成果につながらないためです。
中間指標は改善箇所を探す材料として使い、最終的な収益性はCPAやROASなどで確認します。
コンバージョンの反映時間にも注意する
広告をクリックした人が、その場ですぐ申し込むとは限りません。
数日後に再訪問してCVする場合もあります。
また、広告媒体の計測設定によって、成果が後から反映されることもあります。
そのため、テスト終了直後の数字だけで比較すると、直近の成果を過小評価する可能性があります。
特に検討期間の長い商材では、CVが発生するまでの時間を考慮して評価する必要があります。
テスト開始前に終了条件を決める
少額で広告を運用する場合は、開始前に次の条件を整理しておくと判断しやすくなります。
- 最低限観察する期間
- テストに使える広告費の上限
- 主に比較する指標
- CV不足の場合に確認する中間指標
- 早期停止を検討する条件
例えば「まず7日間を観察する。ただし、事前に決めた損失上限に達した場合は停止を検討する」という運用です。
ここで重要なのは、7日という日数を絶対視しないことです。
成果が少なければ、予算を追加するか、判断を保留するかを検討します。
また、広告画像を比較するなら、広告文やターゲティングなど、ほかの条件は可能な限りそろえます。
複数の要素を同時に変えると、何が結果に影響したのか分かりにくくなるためです。
まとめ|日数・予算・CV数を組み合わせて判断する
A/Bテストに、すべての広告で共通する終了日数はありません。
媒体ごとに推奨期間はありますが、日数だけでなく広告消化額、CV数、成果が反映されるまでの時間も確認する必要があります。
特に少額運用では、十分なCVが集まらないこともあります。
その場合は中間指標を参考にしつつ、無理に勝敗を決めず、追加検証や判断保留も選択肢にします。
大切なのは、配信後の数字を見て場当たり的に決めるのではなく、テスト開始前に目的と終了条件を決めておくことです。
広告費を使って何を確かめたいのかを明確にすることで、次のクリエイティブ改善にもつながります。

