WhatsApp フローで A/B テストを実施する方法

このページで学べること

Klaviyo の A/B テスト体験を使用して、フロー内の個々の WhatsApp メッセージをテストする方法を学びましょう。

フローと A/B テストについて

フローの WhatsApp の A/B テストには、以下のプロセスが含まれます：

1. フローの一部として単一のWhatsAppメッセージを作成します。
2. 既存のテンプレートを使用して、WhatsAppテンプレートのバリエーションを2つ以上設定する方法。
3. 各バリエーションの重みを選択し、各テンプレートを受信する受信者の割合を設定します。
4. 結果が統計的に有意である場合または指定した終了日に、勝利したバリエーションを自動的に選択する、または勝者を手動で選択します。自動選定では、選択した開封率またはクリック率が使用されます。

フローの WhatsApp A/B テストを実行

フロービルダーでA/Bテストを作成します。これらの手順では、WhatsAppテンプレートを使用するメッセージを対象としています。開始する前に、テストしたいメッセージのテンプレートを選択してください。フローコンテンツを編集し、メッセージのステータスを変更する権限が必要です。

新しい A/B テストを作成

1. フロービルダーで、テストしたいWhatsAppメッセージをクリックします。
2. WhatsAppの詳細パネルでA/Bテストを作成をクリックしてください。

バリエーションを編集する

新しいテストを作成すると、A/Bテストの設定ページに直接移動します。テストは、元のテンプレートをバリエーションAとして、またそのテンプレートのコピーをバリエーションBとして開始されます。

WhatsAppフローのA/Bテストには、2–25件のバリエーションを含めることができます。

1. バリエーションBの横にあるテンプレートを選択をクリックしてください。
2. WhatsAppのテンプレートギャラリーで、テストしたい既存のテンプレートを選択してください。

注：バリエーションテンプレートとして使用できるのは既存のテンプレートのみです。

1. テンプレートを使用をクリックして選択内容を確定してください。

1. 任意：公開する前に別のバリエーションを追加するには、バリエーションの3点メニューを開き、バリエーションを複製を選択します。次に、新しいバリエーションに別のテンプレートを選択して確認します。

テスト設定を調整する

設定ウィンドウの下部にあるテスト設定セクションで、勝者のメトリック、バリエーションのトラフィック配分、テストの終了基準を設定できます。

1. 勝者を決めるメトリック
   1. 最も高いパフォーマンスを発揮するテンプレートを特定するために測定するメトリックを選択してください。開封率とクリック率のいずれかを選択してください。
2. テスト比率
   1. 自動割り当てを有効にするには、送信分配トグルをオンにします。トラフィックは均等に分岐して開始され、テストの実行に伴い、パフォーマンスの高いバリエーションにシフトします。オフにすると、各バリエーションの固定パーセンテージを入力できます。パーセンテージの合計が100％になる必要があります。
3. 終了条件
   • テストを手動で終了するには、自動勝者選択をオフにしてください。
   • テストを自動的に終了するには、自動ウィナー選択をオンにして、次の条件のいずれか、または両方を選択してください：
     • 統計的有意性に基づいてテストを終了では、Klaviyoが選択したメトリックで統計的に有意な勝者を特定した時点でテストが終了します。
     • 日付制限を設定を選択し、将来の終了日を選択して、その日にテストを終了します。日付はUTCで評価されます。
   • 両方が選択されている場合、いずれかの条件が満たされた時点でテストが終了します。
4. 仮説や実験デザインの考え方を追跡できるよう、メモを追加してください。

UTMリンクを使用している場合は、UTMを個別にトラッキングするために各バリエーションでリンクを個別にトラッキングをオンにしてください。

[テストを公開]

注意：テストで使用するすべてのテンプレートは、公開する前に承認されている必要があります。公開すると、メッセージとそのバリエーションがライブになります。

ページ上部のテストを公開をクリックしてください。確認内容を確認し、テストを開始するためにテストを公開をもう一度クリックしてください。

ライブ テスト結果を表示する

ライブテストの結果を確認するには、フロービルダーに移動し、WhatsAppメッセージをクリックして、WhatsAppの詳細パネルでテストを表示をクリックしてください。

勝者を手動で選択する

1. ライブテストの結果ページで、勝者を選択をクリックしてください。
2. Choose Winning Variationでバリエーションを選択し、Choose Winnerをクリックして確定します。テストが終了し、選択したバリエーションがフロー内のこのステップで今後の受信者に送信されるメッセージになります。

結果を表示

完了したテストを表示するには、フロービルダーでWhatsAppメッセージをクリックし、WhatsAppの詳細パネルで結果を表示をクリックしてください。以前のテストを表示するには、結果ページ上部のテストドロップダウンから選択してください。

勝つ確率と勝者のメトリックの解釈について詳しくは、フローのメールA/Bテスト結果を確認する方法をご覧ください。

その他のリソース