A/B-Test einer Flow-E-Mail

Du wirst lernen

Lerne, wie du die A/B-Testing-Erfahrung von Klaviyonutzen kannst, um einzelne E-Mails in einem Flow zu testen, z.B. Betreff, Rabatte, E-Mail-Inhalte usw. Du kannst sogar A/B-Tests durchführen, um herauszufinden, ob E-Mails im Klartext besser ankommen als bildlastige HTML-E-Mails.

Über Flow und A/B-Tests

Flow E-Mail A/B-Tests umfassen die folgenden Prozesse:

1. Du erstellst eine einzelne Flow-E-Mail und planst, dass diese E-Mail nach einer bestimmten Anzahl von Stunden oder Tagen versendet wird, so wie du es normalerweise tun würdest.
2. Konfiguriere zwei oder mehr E-Mail-Varianten für diese eine Flow-E-Mail - passe den Betreff oder den Kerninhalt der E-Mail für jede Variante an.
3. Wähle die Gewichtung der einzelnen Varianten, um den Prozentsatz der Empfänger festzulegen, die jede E-Mail erhalten.
4. Die Gewinner-Variante wird automatisch ausgewählt, wenn die statistische Signifikanz erreicht ist, oder manuell auf der Grundlage der höchsten Öffnungsrate oder der höchsten Klickrate unter den Varianten ausgewählt.

Führe einen Flow-E-Mail A/B-Test durch

Die Erstellung eines A/B-Tests kann ganz einfach mit dem Flow Builder erfolgen. Nachdem ein Test für eine E-Mail abgeschlossen wurde, kannst du bei Bedarf einen weiteren Test für dieselbe E-Mail erstellen. 

Einen neuen Test erstellen

1. Um A/B-Tests für eine einzelne E-Mail in einem Flow einzurichten, klicke im Flow Builder auf die E-Mail.
2. Konfiguriere den Inhalt der E-Mail, falls du das noch nicht getan hast.
3. Klicke im
   E-Mail-Detailfenster auf A/B-Test erstellen .

Variation bearbeiten

Nachdem du einen neuen Test erstellt hast, gelangst du direkt zur Registerkarte A/B-Test im Fenster " Inhalte verwalten". Jeder Test enthält automatisch 2 Variationen. Wenn du auf eine Variation klickst, kannst du den Variationsnamen, den Betreff, den Vorschautext, den Absendernamen und die Absender-E-Mail-Adresse bearbeiten.

1. Um den Inhalt der E-Mail zu bearbeiten, klicke auf die Schaltfläche E-Mail bearbeiten über der E-Mail-Vorschau auf der rechten Seite.
   

Eine neue Variation hinzufügen

Wenn du eine weitere Variation hinzufügen möchtest, musst du eine der bestehenden 2 Variationen klonen. 

1. Klicke auf das Klonensymbol rechts neben der Variation, auf der du deine neue Variation aufbauen möchtest.
   
2. Dadurch wird eine neue Variation erstellt, die du so verändern kannst, dass sie sich von der ursprünglichen 2 Variation unterscheidet.
   

Eine Variation löschen

Ein A/B-Test muss mindestens 2 Variationen haben, also kann eine Variation nur gelöscht werden, wenn es 3 oder mehr sind. Außerdem kann eine Variation nur gelöscht werden, wenn sich ein Test im Entwurfsstatus befindet. Das Löschen von Variationen ist für Live-A/B-Tests deaktiviert.

1. Um eine Variation zu löschen, klicke auf das Mülleimersymbol rechts neben der Variation, die du löschen möchtest.
   

Wähle das Gewicht der einzelnen Variationen

Unten auf der Registerkarte " A/B-Test" siehst du den Abschnitt " Testeinstellungen", in dem du die Gewichtung der einzelnen Variationen bearbeiten kannst - so wird der Prozentsatz der Empfänger festgelegt, die jede Variation erhalten. 

Du kannst auch die Option wählen, die Verteilung automatisch zu wählen. Dadurch wird die Verteilung für jede Variante zunächst gleich sein. Wenn eine der Variationen im Laufe der Zeit besser abschneidet als die anderen, passt Klaviyo die Verteilung automatisch so an, dass mehr Empfänger/innen auf die besser abschneidende Variante geleitet werden, während der Test noch läuft.

Gewinnerauswahl konfigurieren

In der Standardeinstellung wählen die Tests automatisch einen Gewinner auf Basis der Klickrate, aber das kann geändert werden.

1. Im Bereich Testeinstellungen unten auf der Registerkarte A/B-Test kannst du auch die Gewinnerauswahl konfigurieren, indem du unter Gewinnerauswahl auf den Link Konfigurieren klickst.
   
   
   
2. Es erscheint ein Modal, in dem du die Gewinnmetrikstattdessen in Öffnungsrateändern kannst.
   Für Flow Email sind nur Öffnungsrate und Klickrate als Gewinnmetrik verfügbar.
   Die Verwendung der Klickrate wird empfohlen, da viele Faktoren wie der Apple Mail Privacy Protection (MPP) zu einer überhöhten Öffnungsrate führen können. Ausführliche Informationen zu MPP-Öffnungen findest du in unserem Leitfaden iOS 15: So bereitest du dich auf Apples Änderungen vor.
   
3. Im Abschnitt " Automatische Gewinnerauswahl" gibt es 2 Optionen:
   1. Test beenden, wenn die siegreiche Metrik mit hoher statistischer Sicherheit (statistische Signifikanz) als Sieger ermittelt wird: Diese Option ist standardmäßig aktiviert. Deaktiviere das Kontrollkästchen neben dieser Option, wenn du den Test stattdessen manuell beenden möchtest, oder wähle die Option, den Test nach einem bestimmten Datum zu beenden.
   2. Datumsgrenze festlegen: Mit dieser Option kannst du ein bestimmtes Datum auswählen, an dem der Test automatisch beendet wird.
4. Wenn du beide Optionen auswählst, wird der Test beendet, wenn die statistische Signifikanz erreicht ist oder wenn das angegebene Datum erreicht ist, je nachdem, was zuerst eintritt.
5. Klicke auf die Schaltfläche Einstellungen speichern, um deine Konfiguration zu bestätigen.

Einen Test veröffentlichen

1. Sobald du deine Variation konfiguriert hast, kannst du deinen Test veröffentlichen. Auf der Registerkarte A/B-Test klickst du oben rechts auf die Schaltfläche Test veröffentlichen.
   
   
   
2. Es erscheint ein Modal, in dem du aufgefordert wirst, die Veröffentlichung zu bestätigen. Klicke zur Bestätigung auf die Schaltfläche Test veröffentlichen.
   
   

Einen Test löschen

1. Wenn du einen Test löschen möchtest, klickst du auf der Registerkarte A/B-Test auf den Pfeil neben der Schaltfläche Test veröffentlichen und wählst Löschen.
   

A/B-Testergebnisse anzeigen

1. Du kannst die Ergebnisse eines Tests ansehen, während er läuft oder nachdem er abgeschlossen ist, indem du im Flow Builder auf die E-Mail und dann auf die Schaltfläche Test ansehen klickst.
   

Dadurch gelangst du auf die Seite mit den A/B-Testergebnissen, auf der du die folgenden Metrik anzeigen kannst:

• Empfänger
  Wie viele Personen die E-Mail erhalten haben
• Öffnet
  Wie viel Prozent/Anzahl der Personen die E-Mail geöffnet haben 
• Klicks
  Wie viel Prozent/Anzahl der Personen die E-Mail angeklickt haben
• Conversion Metrik
  Gesamtzahl der Empfänger, die die Konvertierung ausgelöst haben Metrik die ausgewählte Konvertierungsmetrik für die E-Mail wie z.B. Bestellung aufgegeben

Ausführlichere Informationen über die Seite mit den A/B-Testergebnissen findest du in unserem Artikel über die Überprüfung der E-Mail A/B-Testergebnisse für Flow.

Manuell einen Gewinner auswählen

In den meisten Fällen wirst du warten wollen, bis dein A/B-Test automatisch einen Gewinner auswählt, aber es kann eine Situation geben, in der du einen A/B-Test vorzeitig beenden willst. In diesem Fall befolge die folgenden Schritte.

1. Auf der Seite mit den A/B-Testergebnissen kannst du manuell eine Gewinnervariante für den Test auswählen, indem du auf die Schaltfläche Gewinner auswählen in der oberen rechten Ecke der Seite klickst.
   
   
   
2. Es erscheint ein Modal, in dem du aufgefordert wirst, aus jeder deiner bestehenden Variationen einen Gewinner auszuwählen. Wähle die Variante, die du gewinnen möchtest, aus dem Dropdown-Menü aus und klicke dann auf die Schaltfläche Gewinner auswählen.
   
   

Zusätzliche Ressourcen

Erfahre mehr über A/B-Tests in Flow:

• A/B-Test eines Flow-Zweigs
• Beste Praktiken für A/B-Tests