グローバルホールドアウトグループのスタートガイド

このページで学べること

グローバルホールドアウトグループを使用して、マーケティングの影響と有効性を把握する方法を確認します。グローバルホールドアウトグループでは、一定数のプロファイルをメッセージングから除外することで、マーケティングプログラムの増分効果を判断できます。これらのホールドアウトグループを使用すると、マーケティングプログラムのベース価値を比較して分析できるほか、これらの戦略を継続的に最適化する方法も把握できます。

始める前に

ホールドアウトグループの対象となるには、少なくとも 400,000 件のプロファイル（これはプロファイルの総数であることに注意してください）が必要です。これにより、Klaviyo は、ホールドアウトグループをマーケティングを受け取っている他のプロファイルと比較するのに十分なプロファイルデータを確保できます。十分なデータを収集するために、ホールドアウトグループを 3 か月間実施することも推奨します。

ホールドアウトグループを使用するべき場合と使用しないべき場合の詳細はこちら。

ホールドアウトグループを適切に使用する

ホールドアウトグループの使用方法

ホールドアウトグループは、マーケティングプログラムの有効性や、こうした戦略に加える変更の影響を検証したい場合に使用します。ホールドアウトグループでは、プロファイルをマーケティングメッセージの対象から除外することで比較が可能です。ただし、トランザクションフローのメッセージと、上書きしたキャンペーンまたはフローは除きます。

例えば、次の内容を確立したい場合はホールドアウトグループの使用を検討してください：

• コストに対する、マーケティング プログラム全体の明確な価値と影響。
• マーケティング プログラムに変更（例：新しいチャネルの追加）を加える際に、これらの増分変更に関連付けられる値です。
• 特定のマーケティング活動が実際には有害で、悪影響をもたらしており、調整が必要な場合（例：不適切なタイミングでお客様に対してフローが多すぎる場合）。

ホールドアウトグループに関して考慮すべき追加要素

ホールドアウトグループを使用するタイミングと適用方法を検討することが重要です。

ホールドアウトグループのユーザーには、トランザクションフローのメッセージおよび任意の上書きを除き、キャンペーンまたはフローを通じて送信されるマーケティングメール、SMS、プッシュ通知が配信されないため、次の要素を考慮してください：

• マーケティングプログラムとの比較に使用できるアクティブなホールドアウトグループは、一度に1つのみです。
• ホールドアウトグループは、キャンペーンまたはフローで使用されるすべてのチャネルに適用されます。特定の 1 つのチャネルに対してのみオンにし、別のチャネルではオンにしない、といった設定はできません。
• ホールドアウトテストのタイミングが、重要な季節性のあるEコマースイベントや時期（例：ブラックフライデー、サイバーマンデー）に影響しないか検討してください。
• ホールドアウトグループ内のプロファイルが引き続き受信すべきメッセージ。メッセージの上書きについて詳細はこちら。

ホールドアウトグループと A/B テストの比較

ホールドアウトグループはA/Bテストとは性質が異なり、この2つの機能を混同しないようにしてください。ホールドアウトグループを使用すると、トランザクションフローのメッセージと、上書きするキャンペーンまたはフローを除き、特定のグループの人々にマーケティングメッセージを送信しないようにすることで、マーケティングコミュニケーションの影響を把握できます。一方、A/Bテストでは、マーケティングコミュニケーションの2つ以上のバージョンを比較できます。たとえば、メールキャンペーンの2つのバージョンを比較できます。

ホールドアウトグループの作成

1. ホールドアウトグループを作成するには、[分析] > [実験] に移動し、[グローバル実験] タブをクリックします。

2. [テストを作成] をクリックします。

その後、ホールドアウトグループを設定してカスタマイズするための一連のステップに進みます。

3. 左側のフィールドで、ホールドアウトグループに含めるマーケティング可能なプロファイルの割合を入力してください。0より大きく100未満の数値を、小数点以下2桁までで入力してください。パーセンテージを更新すると、右側の推定ホールドアウト開始サイズも更新されます。

4. 割合に問題がなければ、[続行] をクリックします。

5. 日付を選択フィールドをクリックして終了日を選択し、続行をクリックします。設定を完了してテストを開始をクリックすると、本日からホールドアウトグループが開始されます。

また、必要と判断された特定のフローを、ホールドアウトグループのプロファイルでも引き続き受信できるようにすることもできます。これを行うには、特定のフローのホールドアウトグループルールを上書きします。たとえば、多くのウェルカムフローは十分に重要であるため、ホールドアウト 顧客でも引き続き受信されるべきであり、そのため上書きされます。

6. プロファイルが引き続き特定のフローを受け取るようにするには、左側の [フローを検索] フィールドでフロー名を検索します。また、 [タグを選択] ドロップダウンを開き、ドロップダウンから特定のタグを選択して、特定のフローの検索を絞り込むこともできます。

さらに、すべてのドロップダウンを開き、ウェルカムシリーズや閲覧放棄などのフロータイプを選択することで、特定のフローの検索を絞り込めます。オプションを選択すると、下にそのタイプのフローのみが表示されます。

最後に、ステータス（Live、Manual、Draft）に基づいてフローを探すこともできます。All statuses メニューを開き、いずれかのオプションを選択します。これにより、下のリストが絞り込まれます。

7. 上書きするフロー（つまり、プロファイルがこれらのフローを受信します）が見つかったら、該当する各フローの横にある [チェックボックス] を選択し、[確認] をクリックします。

上書きするものを選択したくない場合は、[スキップ] をクリックします。

8. [詳細] タブで、開始日と終了日、ホールドアウトグループ内のマーケティング可能なプロファイルの割合などの設定を確認します。

9. 上書きされたフロータブをクリックして、以下の例に示すように、ホールドアウトグループのプロファイルに対して引き続き送信されるフローがあるかどうかを確認します。

10。変更がある場合は、[戻る]をクリックします。それ以外の場合は、ホールドアウトグループをアクティブにする準備ができたら、[テストを開始]をクリックしてください。

ホールドアウトグループを編集または終了する

ホールドアウトグループを設定しており、特定の設定（名前や終了日など）を編集したい場合、またはグループテストを早期に終了したい場合は、アナリティクス > A/Bテスト > グローバルテスト に移動します。

ここではグローバルホールドアウトカードを確認できます（履歴カードの上にデータが表示されているカードです）。

アクティブなホールドアウトグループの編集

1. ホールドアウトグループの名前または終了日を編集するには、カードの右上にある[3 点メニュー]をクリックします。

2. メニューから [詳細を編集] を選択してください。

3. ここから、[テスト名を編集] フィールドでホールドアウトグループの名前を編集できます。また、[テスト終了日を変更] フィールドをクリックし、カレンダー ウィジェットから新しい日付を選択して終了日を調整することもできます。

4. 編集が完了したら、[保存] をクリックします。

アクティブなホールドアウトグループのテストを終了する

テストを早めに終了したい場合は、このカードから終了することもできます。

1. カードの右上隅にある [3 点メニュー] をクリックします。

2. メニューから [テストを終了] を選択します。

3. 次に、テストを終了してホールドアウトグループがすべてのマーケティングメッセージを再び受信するようにするかどうかの確認を求めるモーダルが表示されます。確認するには、[テストを終了] をクリックします。それ以外の場合は、この操作を完了しないように [キャンセル] をクリックします。

上書きされたフローの確認中

1. ホールドアウトグループに対してどのフローを上書きした可能性があるかを確認するには、このカードの右上隅にある [3 ドット メニュー] をクリックします。

2. メニューから アクティブ オーバーライド を選択します。

3. 該当する場合は、この特定のホールドアウトグループに対して選択したフロー オーバーライドを確認します。

追加のフローの上書き

初期のホールドアウトグループの設定を完了すると、オーバーライドされたフローをさらに追加したい場合があります。つまり、ホールドアウトグループに受信させたい他のフローがある場合があります。

1. 上書きされたフローを追加するには、フローに移動します。リストから既存のフローを見つけてクリックするか、フローを作成をクリックしてホールドアウトグループを上書きします。
2. フロー内に入ったら、フロー内のトリガーを作成するか、既存のトリガーをクリックします。

グローバルホールドアウトテストがアクティブな間、上書きオプションはトリガーの設定セクションに表示されます。

3. 設定で、グローバルホールドアウトグループを上書きを選択します。

変更は自動的に保存されます。確認メッセージにより、ホールドアウトグループの参加者がこのフローからのコミュニケーションを受け取ることが示されます。

このフローに対してホールドアウトグループの上書きを停止するには、グローバルホールドアウトグループを上書きをクリアしてください。この変更も自動的に保存されます。

個々のキャンペーン（メール、SMS、またはプッシュ）の上書き

特定のキャンペーンでホールドアウトグループに到達できるようにする必要がある場合があります。たとえば、ブランドからの個別のウェルカムメールをグローバルホールドアウトグループに受信させたい場合があります。この場合、グローバルホールドアウトグループがこの特定のメッセージまたはキャンペーンを受信できるように、該当するキャンペーンを上書きする必要があります。

1. [キャンペーン] に移動します。
2. フィールドで検索するか、以下のリストから該当する下書きキャンペーンを見つけます。新しいキャンペーンを作成する場合は、セットアップ中に同時に上書きを直接追加することもできます。

3. 受信者ステップで、グローバルホールドアウトグループを展開します。このオプションは、グローバルホールドアウトテストがアクティブな間に表示されます。

4. グローバルホールドアウトグループを上書きをオンにして、このキャンペーンがホールドアウトグループ内の対象プロファイルに送信できるようにします。オフのままにすると、これらのプロファイルは除外されたままになります。

5. 次へをクリックして、受信者設定を保存し、続行します。

6. メッセージの設定を完了してから、次へをクリックして確認を開きます。

スケジュールする前に、レビューで、キャンペーンがアクティブなグローバルホールドアウトグループに送信されることを確認してください。

後日、新しいマーケティング チャネルを追加する

既存のキャンペーンに新しいチャネル（例：SMS）を追加した場合、グローバルホールドアウトグループを上書きする設定を選択している場合も含め、初回のキャンペーン設定の内容が適用されます。

これを調整する場合は、上記のセットアップ手順に従い、代わりにオーバーライドオプションをオフに切り替えてください。

プロファイルがホールドアウトグループの一部であるか、または過去に一部であったかを確認する

特定のプロファイルが現在グローバルホールドアウトグループの一部であるか、または過去に一時点でも一部であったかを確認できます。

単一のプロファイル内

1. [オーディエンス] > [プロファイル] に移動します。
2. 上のフィールドで検索するか、下のリストからプロファイルを選択してください。以下の例に示すようなバナーで、プロファイルがグローバルホールドアウトグループの一部かどうかを確認できます。

プロファイルが以前にホールドアウトグループの一部であったかどうか、およびそれが発生した時期も確認できます。ホールドアウトグループからの削除は、テストが終了し、プロファイルがそのグループから削除されたことを意味します。

フロー内

1. [フロー] に移動します。
2. 上の検索フィールドを使用するか、以下のリストからフローを見つけてください。
3. スキップされたフロー内のメッセージをクリックしてください。
4. メッセージの設定パネルで、パフォーマンスセクションの詳細を表示をクリックします。

5. 受信者のアクティビティを開き、スキップを選択します。このセクションでは、選択したフローメッセージの送信時間にプロファイルがスキップされた理由（グローバルホールドアウトグループへの所属を含む）を表示します。

キャンペーン内

スキップされた受信者データは、2026年4月15日以降に送信されたキャンペーンでのみ利用できます。

1. [キャンペーン] に移動します。
2. フィールドで検索するか、以下のリストから適切な送信済みキャンペーンを見つけます。
3. 受信者アクティビティを開き、スキップ済みを選択します。このセクションには、グローバルホールドアウトグループへの所属など、このキャンペーンメッセージでプロファイルがスキップされた理由が表示されます。

ホールドアウトグループの分析を確認します。

最新のグローバルホールドアウトグループカード

分析セクションの上部にあるグローバルホールドアウトカードには、最新のホールドアウトテストと、そのステータス（アクティブまたは完了）が表示されます。このカードは、コンバージョン率、マーケティングリフト、勝率を使用してマーケティング戦略を確認するのに役立ちます。カードの上にあるコンバージョンメトリックセレクターを使用して、比較するメトリックを選択してください。

カードの上部には、マーケティングリフトの全体割合が表示されます。これは、処置グループのコンバージョン率とホールドアウトグループのコンバージョン率の相対差です：（処置率−ホールドアウト率）÷ホールドアウト率。割合（％）として表示されます。ホールドアウトのコンバージョン率が0の場合、マーケティングリフトは0％と表示されます。上書きするよう選択したキャンペーンやフローも考慮したうえで、マーケティングプログラムの全体的な影響を把握するのに役立ちます。

マーケティングリフトの下には、次のデータが表示されます：

• ホールドアウト割合
  設定時にホールドアウトグループに対して選択した割合です。グループ内のプロファイルは、トランザクションフローのメッセージと、上書きしたキャンペーンまたはフローを除き、マーケティングメッセージの対象外となります。
• 成約確率
  マーケティングプログラムがホールドアウトグループよりも有意義な改善をもたらす確率。

• 処置群
  すべてのマーケティングの配信対象となるメイン グループです。
• ホールドアウトグループ
  キャンペーンおよびフローで送信されるマーケティングメール、SMS、プッシュ通知の対象から除外されるグループです（ただし、トランザクションフローのメッセージと、上書きしたキャンペーンまたはフローは除きます）。
• マーケティング可能なプロファイル
  メール、SMS、またはプッシュ通知のうち少なくとも1つで到達可能なプロファイルは、ホールドアウトのレポート作成においてマーケティング可能と見なされます。メールの場合、マーケティング可能なプロファイルには主に2つのカテゴリーがあります。
  • 購読者
    購読者は、サインアップフォームに入力したか、またはメールマーケティングの受信に明示的に同意しています。
  • 一般的なエンゲージメントによって追加されたプロファイル
    継続的なメールマーケティングに明示的に同意していなくても、誰かがメールアドレスを共有する可能性があります。例えば、サイトで注文をした人やチェックアウト落ちした人（チェックアウトプロセス中にメールアドレスを追加したかもしれないが、明示的にオプトインしたことはない）が該当します。

最後の2列には、選択したコンバージョンイベントを実行したユニークなプロファイル数と、テスト期間中のグループのマーケティング可能なプロファイルに占める割合が表示されます。複数回コンバージョンしたプロファイルは、1回としてカウントされます。これらの結果には、Klaviyoメッセージにアトリビューションされているかどうかに関係なく、コンバージョンが含まれます。

履歴カード

履歴サマリーカードには、すべてのホールドアウトグループのデータが表示されます。このカードは、マーケティングプログラムに加えた増分的な変更と、それらがコンバージョンやリフトにどのように影響したかを確認するのに特に役立ちます。ここでは、これらの変更や特定の時点をさかのぼって追跡し、プログラムで何が成功したかを把握できます。

列は次の内容を表します。

• 名前
  設定したグローバルホールドアウトグループの名前。
• 開始日
  グローバルホールドアウトグループが設定され、最初にアクティブになった日時です。
• 終了日
  グローバルホールドアウトグループが終了し、プロファイルがそこから削除された日時。
• ホールドアウト サイズ
  ホールドアウトグループで表される、マーケティング可能なプロファイル総数に対するプロファイルの割合。これは、初期のホールドアウトグループ設定から導出されます。
• マーケティング リフト
  選択したコンバージョン メトリックを使用し、ホールドアウトグループと比較したマーケティング プログラムのリフト率（％）。これは、マーケティングの大部分またはすべてを受け取っていない場合と比較した、マーケティング戦略全体の成功度を示します。
• 勝率
  マーケティングプログラムが、ホールドアウトグループよりも有意義な改善をもたらす確率。

また、これらの列のいずれかの横にある矢印をクリックして、名前、日付、ホールドアウト サイズ、マーケティング リフト、勝率を昇順または降順で並べ替えることもできます。

グローバル ホールドアウト名のいずれかをクリックすると、個別の分析カードに移動し、この特定のグループのデータがマーケティング プログラムと比較して表示されます。

その他のリソース