WhatsApp フローで A/B テストを実施する方法

このページで学べること

Klaviyo の A/B テスト体験を使用して、フロー内の個々の WhatsApp メッセージをテストする方法を学びましょう。

フローと A/B テストについて

フローの WhatsApp の A/B テストには、以下のプロセスが含まれます：

1. フローの一部として 1 件のフロー WhatsApp メッセージを作成します。
2. 既存のテンプレートを使用して、フローに 2 つ以上の WhatsApp テンプレートのバリエーションを設定します。
3. 各バリエーションの重みを選択し、各テンプレートを受信する受信者の割合を設定します。
4. 95％の確率しきい値に達した後、特定の日付以降、またはバリエーションの中で最も高い開封率または最も高いクリック率に基づいて勝者を手動で選択した後に、勝者のテンプレート バリエーションが自動的に選択されます。

フローの WhatsApp A/B テストを実行

A/B テストは、フロー ビルダーで簡単に作成できます。

新しい A/B テストを作成

1. 任意のフローで個々の WhatsApp テンプレートの A/B テストを設定するには、フロー ビルダー内の最初の WhatsApp メッセージをクリックします。
2. WhatsApp の詳細パネルで ［A/B テストを作成］ をクリックしてください。

バリエーションを編集する

新しいテストを作成すると、A/B テスト の設定 ウィンドウに直接移動します。各テストには、バリエーション A として初期テンプレートが自動的に含まれ、バリエーション B には初期テンプレートのコピーが含まれます。新しいバリエーション B のテンプレートを選択してください。

現時点では、WhatsApp フロー A/B テストでサポートされているバリエーションは 2 つのみです。

1. バリエーション B の横にある [テンプレートを選択] をクリックして、バリエーション テンプレートを選択します。
2. WhatsApp のテンプレート ギャラリーに移動します。既存のテンプレートからバリエーション テンプレートを選択します

注：バリエーションテンプレートとして使用できるのは既存のテンプレートのみです。

「[テンプレートを使用]」をクリックしてテンプレートの選択を確定します。

テスト設定を調整する

構成ウィンドウ下部の テスト設定 セクションで、勝者のメトリック、バリエーションのトラフィック配分、テスト終了条件を設定できます。

1. 勝者を決めるメトリック
   1. 最もパフォーマンスの高いテンプレートを判断するために測定するメトリックを選択します。開封率とクリック率のいずれかを選択します。
2. トラフィック配分
   1. 固定のトラフィック割合と動的な割り当てのどちらかを選択します。
3. 終了条件
   1. テストを手動で終了するまで実行し続けるには、[自動的に勝者を選択] を選択解除してください。
   2. 定義済みの条件に基づいてテストを自動的に終了するには、[自動勝者選択] を選択してください。
      1. [統計的有意性によりテストを終了] を選択すると、あるテンプレートがより高いパフォーマンスを発揮するテンプレートである確率が95％に達した時点でテストが終了します。
      2. [日付制限を設定] は、特定の日付にテストを終了します。
      3. 両方を選択すると、2 つの条件のうち早い方が満たされた時点でテストが終了します
4. 仮説や実験デザインの考え方を追跡できるよう、メモを追加してください。

UTM リンクを使用している場合は、「バリエーションごとにリンクを個別にトラッキング」を切り替えて、UTM を個別にトラッキングします。

[テストを公開]

ページ上部の [テストを公開] をクリックし、画面の指示に従ってテストを公開します。

注：テストは、両方のテンプレートが承認された後にのみ公開できます。

ライブ テスト結果を表示する

ライブテストの結果を表示するには、フロー ビルダーに移動し、WhatsApp メッセージをクリックして、WhatsApp の詳細サイドペインで [テストを表示] をクリックします。

勝者を手動で選択する

テストを終了し、勝者のバリエーションを手動で宣言するには、[勝者を選択] をクリックして、画面の指示に従います。これにより、今後は勝者のバリエーションが全員に送信されるメッセージになります

結果を表示

完了した A/B テストの結果を確認するには、フローのメール A/B テスト結果を確認する方法をご覧ください。

その他のリソース