A/Bテストは「良いページを探す方法」ではなく、仮説を比較する方法
商品ページでA案とB案を作っても、何を検証したいのか決まっていなければ、勝敗が出ても次の改善へつながりません。
テスト前に必要なのは、どの購入判断が止まっていて、何を変えればその停止点が動くと考えるのかを1つ決めることです。
1|まずテストする「停止点」を決める
クリック率、商品理解、価格納得、証拠不足、配送条件など、購入が止まる場所は複数あります。ページ全体をA/Bする前に、どの判断を動かすテストなのかを固定します。
2|一度に複数要素を変えすぎない
画像、コピー、価格、レビュー表示を同時に変えると、結果が動いても何が効いたか分かりません。次の改善へ使えるよう、主要変更を1つに絞ります。
3|勝敗指標をテスト前に決める
クリック率を改善するテストなのに売上だけを見る、CVRを改善するテストなのに滞在時間だけを見る、といった指標ズレを避けます。
例:
サムネイル → クリック率
商品ページ冒頭 → 離脱・CVR
価格訴求 → CVR・1注文利益
アップセル → 客単価
目的と判定指標を揃える。
サムネイル → クリック率
商品ページ冒頭 → 離脱・CVR
価格訴求 → CVR・1注文利益
アップセル → 客単価
目的と判定指標を揃える。
4|テスト期間中に大きな販促条件を同時変更しない
イベント、クーポン、広告流入、在庫、価格が同時に変わると、A/B差より外部条件の影響が大きくなります。可能な範囲で比較条件を揃えます。
5|差が出なかったときに「AもBも同じ」だけで終わらせない
差が出ない場合、仮説が間違っていた、変更幅が小さかった、母数が不足した、そもそも別の停止点が主原因だった可能性があります。次のテストへ進むために理由を分けます。
6|A/Bテストを「改善の最初」に置かない
ページの問題がまだ特定できていない段階でテストを始めると、候補案を大量に作るだけになります。原因仮説を作り、改善案を絞った後にA/Bテストを置きます。
A/Bテスト前の確認順
- 止まっている購入判断を特定する
- 変える主要要素を1つ決める
- 勝敗指標を決める
- 期間・販促・流入条件を揃える
- 差が出ない場合の解釈を用意する
- テスト結果を次の改善仮説へつなぐ
A/Bテストの価値は「勝ち案を決めること」だけではない
テストの価値は、どの購入判断が売上・CVRへ影響しているかを学習できることです。仮説 → 変更 → 指標 → 解釈まで決めて初めて、次の改善へ使えるテストになります。