A/B テストのリファレンスのベストプラクティス
このページで学べること
Klaviyo の A/B テスト機能のベストプラクティスを学び、お客様とのコミュニケーションを最適化しましょう。
A/Bテストでは、オーディエンスの一部に対して異なるコピーライティングやクリエイティブを比較し、フォームまたはメールの行動喚起(CTA)を完了する可能性を高める要因を把握できます。これらの6つのベストプラクティスを活用してテストを計画し、結果を解釈しましょう。
仮説を立てる
テストを構築する前に、何をどのように改善したいのか、そしてその理由を書き出してください。たとえば、より具体的なCTAの文言にすると、訪問者が何に登録するのかを理解できるため、フォーム送信数が増えると予測できるかもしれません。
仮説の立て方は、ミクロとマクロの2つの異なる視点から考えることができます。マーケティング戦略がうまくいっていると感じていて、顧客とのコミュニケーションを微調整したい場合は、次のいくつかの点を変更することを検討できます:
- CTA の色
- CTA のコピー
- 件名
- 差出人名
- オファー金額
- 画像
マーケティングを大きく変更することを検討している場合、A/B テストを使用して、新しいアイデアがマクロな規模でオーディエンスに響くかどうかを確認できます。この例としては、次のようなものがあります:
- 異なるブランドカラー
- 新しいレイアウト
- ブランドボイスの変更
- 新しいブランド コミュニティへの参加
一度に1つの変数をテストしてください
テストしたいアイデアがいくつかある場合でも、1回のテストでは変数を1つずつテストするのが最適です。たとえば、CTAの色とそのテキストの両方を編集してフォーム送信率が急増した場合、その急増が色の変更によるものなのか、CTAのコピーによるものなのかがわかりません。一度に1つの変数をテストすると、結果の違いを行った変更と結び付けられます。
十分に大きいオーディエンスを用意する
フォームの素晴らしいアイデアを思いついてA/Bテストを行い、初日にフォームを見た最初の10人がクリックして購入したと想像してみてください。1週間のコースの間に、次の2,000人はフォームからすぐに離脱します。1日目の後にテストを終了していた場合、より多くのオーディエンスはそうではないことを示しているにもかかわらず、フォームは素晴らしいと思ってしまうでしょう。より多くのオーディエンスから結果を収集できるように十分な時間を確保し、そのうえで、フォームのA/Bテスト結果が統計的に有意かどうかを確認してください。サンプル数が多いだけでは、1つのバリエーションのほうが優れているとは断定できません。
4 つ以下のバリエーション
同様に、引き続き一度に1つの変数のみをテストする場合、追加するバリエーションが多いほど、信頼性の高い結果を得るために必要なオーディエンスは大きくなります。より多くのテストを実施できるよう、タイムリーに結果を得るには、テストごとに1つの変数につきバリエーションは4つまでにしてください。
本番テストは編集しないでください
テストを組み立てるという大変な作業が終わったら、結果に影響する可能性があるテストの調整は控えてください。コンテンツを変更する必要がある場合は、新しいテストを開始して、変更前と変更後の結果を分けて管理してください。
- サインアップフォームでは、テストの実施中にテスト設定を変更できますが、公開中のバリエーションのコンテンツは変更できません。コンテンツを編集すると、新しい下書きテストが作成されます。新しいテストを公開するまで、現在のテストは有効です。
- フローのメールでは、ライブテストを編集した後にプロンプトが表示されたら、終了して新しいテストを公開を選択し、次に続行を選択してください。現在のテストを続行すると、結果が歪む可能性があります。
- すでに送信中のキャンペーンでコンテンツを変更する必要がある場合は、残りの送信をキャンセルしてください。キャンセルしても、配信済みのメールは取り消せません。キャンセルしたキャンペーンを複製するか新しいキャンペーンを作成し、受信者を確認して、新しいテストを設定してください。
フィードバックを送る
マーケティングを大きく変えようと計画している場合、A/Bテストは、新しいアイデアにオーディエンスがどのように反応するかを確認するうえで最適な手段です。顧客から直接フィードバックを求めることは、A/Bテストと併用できる有効な戦略です。メールのテストでは、受信者がCTAをクリックしたときにプロファイルプロパティを追加できます。そのプロパティを使用してセグメントを作成し、フィードバックを依頼する対象者を特定してください。
サインアップフォームの場合は、フォームから登録した購読者のセグメントを作成して、フィードバックを依頼する相手を特定します。
これらの購読者を特定したら、プレーンテキストメールでフィードバックを依頼するフォローアップを行えます。フォームやメールとやり取りした人からのみ情報を収集することになるため、ブランドに対してエンゲージメントが非常に高い顧客も取り込むようにしてください。フィードバックは、コミュニティのエンゲージメントを高め、ブランドの支持者になってもらうための優れた方法です。