この会話の登場人物

よもぎ

35歳・女性・広告代理店の営業職として働く正社員・好きな食べ物はツナ

hikaru

36歳・男性・3社経営代表の異端児・趣味は海外旅行

解説用の会話です。実際の相談やお客様の体験談ではありません。構成例・撮影例は編集部の提案です。

ABテストは、何を知りたいかから設計する

よもぎ

ABテストでは、冒頭とCTAを一緒に変えてよいですか？

hikaru

どちらが理由か知りたいなら分けよう。冒頭を検証する回は本文、CTA、案内先をそろえる。結果のよい広告を探すだけか、次の制作に使える理由を知りたいかでも設計が変わるよ。

よもぎ

昨日のAと今日のBを比べれば、十分でしょうか？

hikaru

曜日や競合、配信先が変わるから単純比較は難しいね。利用できるなら媒体のスプリットテストを検討しよう。TikTokの公式説明も一つのテストで選ぶ変数は一つとしている。アカウントで利用できる条件も確認したい。

仮説・差分・固定条件・判定基準を一枚にする

よもぎ

冒頭比較のテスト表には、何を書けばよいですか？

hikaru

『利用場面を先に見せると購入につながるか』などの仮説と、A・Bの差分を書こう。本文、CTA、LP、対象は固定する想定だね。主指標、費用上限、期間、判定担当も開始前に決めておきたい。

よもぎ

通常配信で二案を出すだけでも、ABテストと呼べますか？

hikaru

比較はできるけど、厳密な条件がそろうとは限らないよ。自動で配信が偏れば対象や機会も違う場合がある。媒体のテスト機能を使ったか、通常配信の参考比較かを報告で区別しよう。

途中の上下で止めず、分からない結果も残す

よもぎ

テストの途中で結果が悪い方を止めてもよいですか？

hikaru

費用上限や重大な不具合など、事前に決めた停止条件なら対応しよう。単に今の数字が悪いという理由で何度も止めると、比較の結論が偏りやすい。予定した期間と判定条件を、開始前に関係者で共有しておくんだ。

よもぎ

差が小さければ、二案とも失敗でしょうか？

hikaru

分からなかった可能性もあるよ。差を確認できるだけの成果数があるか、実務上意味のある差かを見よう。無理に勝者を決めず、差を判断できなかったと記録して、次に比較する仮説を選ぶことも立派な判断だね。

テストで分かったことを、次の制作指示にする

よもぎ

勝った冒頭は、次の広告にも使ってよいでしょうか？

hikaru

今回の対象と条件では有望だった、と考えよう。別商品や違う対象で同じ結果になるとは限らない。何が違ったかと、どの主指標で判断したかを残し、次の企画に応用する範囲を明確にしたいね。

よもぎ

テスト用の動画を頼む場合、何を渡しますか？

hikaru

ショート動画屋さんへ、仮説、A・Bの差分、固定する本文とCTAを共有しよう。冒頭二案だけなのか、別の実演まで必要なのかが分かる。配信担当と主指標も合わせておくと、納品後の比較を進めやすいよ。