ABテストの概要と方法
このページでわかること：広告のABテストの設計方法・判断基準・停止タイミングの考え方
「ABテストってどうやってやるの？何件集まったら判断していいの？」という疑問はよくあります。結論からお伝えすると、広告の2案を比較する検証（ABテスト）は「1要素だけ変えて・十分なデータが集まってから・統計的に有意な差が出たものを採用する」の3ステップが基本です。感覚で判断せず、データが揃うまで待つことが正確なテストの鍵です。
ABテストの基本設計
| ステップ | 内容 | 注意点 |
|---|---|---|
| ① 仮説を立てる | 「〇〇を変えたらクリック率（CTR）が上がるはず」と予測する | 改善したい指標を1つに絞る |
| ② 1要素だけ変える | 画像・見出し・CTAなど変更点を1つに限定 | 複数変更すると原因特定が不可能 |
| ③ 同時・同条件で配信 | A/Bを同じ期間・同じ予算で配信 | 時期がズレると外部要因が混入 |
| ④ データが集まったら判断 | 成果（CV）件数50件以上または2週間経過 | データ不足での早期判断はNG |
判断基準と停止タイミング
どちらが勝ちかを判断する目安は、成果（CV）件数50件以上のデータがある状態で成果あたりの費用（CPA）に20%以上の差が出ていることです。差が小さい場合は誤差の範囲のため、さらにデータを集めてから判断します。
| 状況 | 判断 | 対応 |
|---|---|---|
| 片方の成果あたりの費用（CPA）が20%以上低い・成果（CV）50件以上 | テスト終了・勝ちパターン採用 | 負けを停止。勝ちを継続・横展開 |
| 差が10%未満・成果（CV）50件以上 | 有意差なし | 両方継続またはより大きな変更でテスト |
| 2週間経過・成果（CV）50件未満 | データ不足 | テスト期間を延長する |
AdXpandの推奨方針
AdXpandでは、常に1〜2本の「テスト用広告」を稼働させておくことをおすすめしています。現状の勝ちパターンに安心して新しいテストをしないでいると、バナーへの飽き（クリエイティブ疲弊）が起きた時に手元に次の候補がない状態になります。勝ちを見つけながら次のテストを仕込む習慣が長期的な成果につながります。
まとめ
ABテストは「1要素だけ変える・同条件で配信・データが揃うまで待つ」が基本
判断基準は成果（CV）50件以上で成果あたりの費用（CPA）に20%以上の差が出ること
差が小さい・データ不足の場合は早期判断せずテストを延長する
常に1〜2本のテスト用広告を稼働させておく習慣を持つ
関連記事：広告の改善方法 ／ クリエイティブの入れ替えサイクル ／ 媒体ごとの運用レバー