フロー メールを A/B テストする方法

このページで学べること

Klaviyo の A/B テスト エクスペリエンスを使用して、フロー内の個別のメール（件名、割引、メールコンテンツなど）をテストする方法を学びます。A/B テストを使用して、プレーンテキストのメールが画像の多い HTML メールよりも高い成果を上げるかどうかを判断することもできます。

フローと A/B テストについて

フローのメール A/B テストには、次のプロセスが含まれます：

1. 通常どおり、単一のフロー メールを作成し、このメールが特定の時間数または日数の後に送信されるようにスケジュールします。
2. この単一のフロー メールに対して 2 つ以上のメール バリエーションを設定し、各バリエーションの件名またはメールの主要コンテンツを調整します。
3. 各バリエーションの重みを選択して、各メールを受信する受信者の割合を設定します。
4. 統計的有意性に達した後に自動的に勝ちバリエーションを選択するか、またはバリエーションの中で最も開封率が高いもの、もしくは最もクリック率が高いものに基づいて手動で勝者を選択します。

フロー メールの A/B テストを実行する

フロー ビルダーから、A/B テストは簡単に作成できます。メールのテストが完了した後も、必要に応じて将来同じメールで別のテストを作成できます。

新しいテストを作成

1. 任意のフローで個別のメールの A/B テストを設定するには、フロービルダー内のメールをクリックしてください。
2. まだ設定していない場合は、メールのコンテンツを設定してください。
3. メールの詳細 パネルで、[A/B テストを作成] をクリックします。
   

バリエーションを編集する

新しいテストを作成すると、コンテンツの管理ウィンドウの A/B テスト タブに直接移動します。各テストには、自動的に 2 つのバリエーションが含まれます。バリエーションをクリックすると、バリエーション名、件名、プレビューテキスト、送信者名、送信者メールアドレスを編集できます。

1. メールの内容を編集するには、右側のメール プレビューの上にある [メールを編集] ボタンをクリックします。
   

新しいバリエーションを追加

別のバリエーションを追加する場合は、既存の 2 つのバリエーションのうち 1 つを複製する必要があります。

1. ベースにしたいバリエーションの右側にある複製アイコンをクリックします。
   

2. これにより新しいバリエーションが作成され、元の 2 つのバリエーションとは異なるように変更できます。
   

バリエーションを削除

A/B テストには少なくとも 2 つのバリエーションが必要なため、バリエーションは 3 つ以上ある場合にのみ削除できます。また、バリエーションはテストが Draft ステータスの間にのみ削除できます。ライブの A/B テストでは、バリエーションを削除できません。

1. バリエーションを削除するには、削除したいバリエーションの右側にあるゴミ箱アイコンをクリックします。
   

各バリエーションの重みを選択してください。

A/B Test タブの下部に、各バリエーションの比重を編集できる Test Settings セクションが表示されます。これにより、各バリエーションを受信する受信者の割合が設定されます。

配布方法を自動的に選択するオプションを選択することもできます。これにより、最初は各バリエーションの配分が均等に設定されます。時間が経つにつれて、いずれかのバリエーションが他よりも良いパフォーマンスを示した場合、テストの実行中でも Klaviyo が配分を自動的に調整し、より良いパフォーマンスのバリエーションにより多くの受信者を振り向けます。

勝者の選択を設定する

テストはデフォルトでクリック率に基づいて勝者を自動的に選択しますが、変更できます。

1. A/B Test タブ下部の Test Settings セクションで、 Winner Selection の下にある Configure リンクをクリックして、勝者の選択も設定できます。
   
   
   

2. モーダルが表示されるので、Winning Metric を 開封率 に変更します。

1. 自動勝者選択セクションには、2 つのオプションがあります：
   1. 高い統計的確実性（統計的有意性）で勝利指標が勝つと判断された場合にテストを終了する: このオプションはデフォルトでオンになっています。代わりに手動でテストを終了する場合、または特定の日付以降にテストを終了するオプションを選択する場合は、このオプションの横にあるチェックボックスをオフにしてください。
   2. 日付制限を設定する：このオプションを使用すると、テストを自動的に終了する特定の日付を選択できます。
2. 両方のオプションを選択すると、統計的有意性に達した場合、または指定した日付に達した場合のうち先に発生した方に応じてテストが終了します。
3. 設定を確定するには、[設定を保存] ボタンをクリックします。

テストを公開

1. バリエーションの設定が完了したら、テストを公開する準備が整いました。A/B Test タブで、右上の [テストを公開] ボタンをクリックします。
   
   
   

2. 公開を確認するよう求めるモーダルが表示されます。[テストを公開] ボタンをクリックして確定します。
   

テストを削除

1. テストを削除する場合は、A/B Test タブで Publish Test ボタンの横にある矢印をクリックし、Delete を選択します。
   

A/B テスト結果を表示

1. フロー ビルダー内のメールをクリックし、[テストを表示] ボタンをクリックすると、テスト実行中または完了後にテスト結果を確認できます。
   

これにより A/B テスト結果ページに移動し、以下のメトリックを表示できます。

• 受信者
  メールを受信した人数
• 開封
  メールを開封した人数または割合
• クリック
  メール内のリンクをクリックして遷移した人の割合/人数
• コンバージョン メトリック
  Placed Order など、メールの選択したコンバージョン メトリックによってコンバージョン メトリックをトリガーした受信者の総数。

メール A/B テスト結果ページの詳細については、フローのメール A/B テスト結果を確認する方法 に関する記事をご覧ください。

勝者を手動で選択する

ほとんどの場合、A/B テストが自動的に勝者を選択するのを待つことになりますが、A/B テストを早めに終了したい状況もあります。その場合は、以下の手順に従ってください。

1. A/B テスト結果 ページで、ページ右上の [勝者を選択] ボタンをクリックすると、テストの勝者バリエーションを手動で選択できます。
   
   
   

2. 既存の各バリエーションから勝者を選ぶよう求めるモーダルが表示されます。ドロップダウンから勝者にしたいバリエーションを選択し、[勝者を選択]ボタンをクリックします。
   

その他のリソース