So führst du A/B-Tests für E-Mail-Kampagnen durch

Übersicht

Erfahre, wie du einen A/B-Test für eine Kampagne einrichtest und durchführst, wie du die Testergebnisse interpretierst und welche Anwendungsfälle es für A/B-Tests in Kampagnen gibt. Mit Klaviyos A/B-Test-Funktionen für Kampagnen kannst du ganz einfach verschiedene Betreffe, Nachrichteninhalte und Versandzeitpunkte testen, damit du besser verstehst, was für deine Zielgruppe am besten funktioniert.

A/B-Test für Kampagnen-E-Mails erstellen

1. Gehe zu Kampagnen > Kampagne erstellen.
2. Gib deiner Kampagne in der Seitenleiste einen Namen.
3. Wähle E-Mail aus und klicke dann auf Weiter.
4. Wähle die Listen oder Segmente aus, an die du senden möchtest.
5. Klicke auf Weiter.
6. Gib den Betreff ein und bearbeite bei Bedarf den Vorschautext, den Absendernamen und die Absender-E-Mail-Adresse.
7. Erstelle die erste Version deiner E-Mail und füge deinen Text, Bilder und Links hinzu.
8. Klicke oberhalb des Betreff-Felds auf A/B-Test erstellen.
   • Dadurch wird automatisch eine zweite, identische Variante deiner Kampagne erstellt und du wirst zur Seite Kampagnen-A/B-Test weitergeleitet.
     

9. Füge in jedes Feld Variantenname einen aussagekräftigen Variantennamen ein, der darauf verweist, was du per A/B-Test testest, z. B. „Sommer-Launch-E-Mail – weiße Buttons.“
   

Konfiguriere deine Testvarianten

Nachdem du einen Test erstellt hast, entscheide als Nächstes, welche Elemente deiner Kampagne du auf Performance testen möchtest, damit du die verschiedenen Varianten deiner Kampagne erstellen kannst.

Betreff mit AI testen

Anstatt einen Test manuell zu erstellen, kannst du die Erstellung auch mit KI automatisieren. Diese Funktion dient insbesondere zum Testen von Betreffs.

1. Erstelle eine E-Mail-Kampagne mithilfe der Schritte aus dem vorherigen Abschnitt.
2. Wähle eine Vorlage aus und bearbeite den Inhalt der E-Mail.
3. Unter dem Feld Betreff wähle eine der Optionen im Abschnitt Eine Variante für einen A/B-Test generieren aus.
   

Nachdem eine Option ausgewählt wurde, erstellt die KI einen Test mit 2 Varianten mit unterschiedlichen, aber ähnlichen Titeln, einschließlich deines ursprünglichen Titels für Variante A und eines von der KI basierend auf der ausgewählten Eingabeaufforderung generierten Titels für Variante B.

Die verfügbaren Optionen hängen vom eingegebenen Betreff ab, aber Beispiele sind:

• Personalisierung vs. keine Personalisierung
  Variante B enthält den Vornamen der Kund*innen in der Betreff oder entfernt ihren Namen, falls er ursprünglich enthalten war.
• Kurz vs. lang
  Variante B hat je nach Länge deines ursprünglichen Betreffs entweder eine kürzere oder längere Betreffzeile.
• Fragen vs. Aussage
  Variante B wandelt deinen ursprünglichen Betreff in eine Frage um oder in eine Aussage, wenn es ursprünglich eine Frage war.
• Emoji vs. kein Emoji
  Variante B enthält ein relevantes Emoji im Betreff oder entfernt alle Emojis, falls sie ursprünglich enthalten waren.

Lies den Rest dieses Artikels, um zu erfahren, wie du deinen A/B-Test nach der Erstellung weiter bearbeitest und sendest.

Inhalts-Test

Du kannst Nachrichteninhalte testen, um herauszufinden, was deine Zielgruppe sehen möchte. Klicke oben auf der Seite auf Inhalt testen.

Bearbeite eine der Varianten für deinen A/B-Test. Für A/B-Tests ist es wichtig, jeweils nur einen Faktor zu vergleichen. Wenn du also den Betreff bearbeitest, ändere nichts anderes. Wenn gewünscht, kannst du weitere Varianten hinzufügen, indem du auf der Karte für eine bestimmte Variante auf die Schaltfläche Klonen klickst, aber wir empfehlen nur 2 Varianten.

Versandzeitpunkt testen

Du kannst auch Versandzeitpunkte testen, um zu ermitteln, wann deine Zielgruppe von dir hören möchte. Klicke oben auf der Seite auf Versandzeitpunkte testen.

Achte beim Testen von Versandzeitpunkten darauf, dass Inhalt und Betreff beider Varianten exakt gleich sind.

Wenn du nicht weißt, wo du anfangen sollst, empfehlen wir, es am Abend zu versuchen. Alternativ kannst du, wenn du dafür qualifiziert bist, stattdessen Smart Send Time verwenden.

Teststrategie auswählen

Wenn dein Konto qualifiziert ist, entscheide dich anhand der folgenden Optionen für deine Teststrategie:

• Gewinnervariante (Standard-A/B-Test)
• Personalisierte Varianten für alle Empfänger

Der Unterschied zwischen der gewinnenden Variante und personalisierten Varianten

Beide Teststrategien senden Varianten an eine Testgruppe, die aus einem Prozentsatz der gesamten Empfänger*innen der Kampagne besteht, und testen den Nachrichtenerfolg anhand einer Metrik deiner Wahl, z. B. der Öffnungsrate. Es gibt jedoch einige wichtige Unterschiede darin, wie jede Strategie Nachrichten an die übrigen Empfänger*innen sendet, nachdem der Testzeitraum abgelaufen ist:

• Gewinnende Variante – die Standardoption für A/B-Tests, mit der 1 gewinnende Variante ermittelt und nach Ablauf des Testzeitraums an die restlichen Empfänger*innen der Kampagne gesendet wird.
• Personalisierte Varianten – verwendet KI, um nach Mustern unter den Testempfänger*innen zu suchen, die mit jeder Variante interagieren. Nachdem der Testzeitraum beendet ist, sagt Klaviyo voraus, welche Variante für jede*n Empfänger*in besser abschneiden wird, und sendet den übrigen Empfänger*innen ihre bevorzugte Variante.

Personalisierte Varianten für alle Empfänger

Wenn du personalisieren möchtest, welche Variante jede*r Empfänger*in individuell erhält, wähle Personalisierte Varianten für alle Empfänger aus.

Klaviyo verwendet Informationen zu jedem Profil, um zu bestimmen, welche Variante am ehesten erfolgreich ist, dieses Profil zu konvertieren. Diese Profilinformationen umfassen unter anderem:

• Historische Kundenengagement-Raten
• Customer Lifetime Value (CLV)
• Standort

Wenn du beispielsweise die Öffnungsrate als Gewinn-Metrik ausgewählt hast und Profile in der Testgruppe mit einem Customer Lifetime Value von 100 oder mehr Variante A häufiger öffnen, Profile mit einem Customer Lifetime Value von weniger als 100 aber Variante B häufiger öffnen, erhalten die übrigen Empfänger*innen der Kampagne E-Mails basierend darauf, welche Variante sie gemäß ihrem Customer Lifetime Value am wahrscheinlichsten öffnen. Dies ist ein vereinfachtes Beispiel, da Klaviyo viele Datenpunkte verwendet, um personalisierte Varianten zu bestimmen.

A/B-Test-Einstellungen konfigurieren

Nachdem du deinen Content erstellt hast, lege die Größe deiner Testgruppe und die Dauer deines Testzeitraums fest.

Wähle zuerst die gewinnende Metrik aus, also die wichtigste Metrik, bei der du eine Verbesserung sehen möchtest. Wähle aus:

• Öffnungsrate
  Empfohlen, wenn du Betreff, Vorschautext oder Absendername und E-Mail-Adresse testest.
• Klickrate
  Empfohlen, wenn du E-Mail-Inhalte testest, wie z. B. Schaltflächengröße oder -farbe.
• Bestellrate
  Nur für Konten mit einer Placed Order -Metrik verfügbar und nicht für personalisierte Varianten verfügbar. Das wird empfohlen, wenn du E-Mail-Inhalte testest, z. B. ob das Anzeigen von Bestsellern oder neuen Artikeln zu mehr Conversions führt.

Wir empfehlen eine Testgröße basierend auf deiner Listengröße und eine Testdauer basierend auf der A/B-Test-Metrik (d. h. Öffnungen, Klicks oder aufgegebene Bestellungen). Verwende bei Bedarf den Schieberegler, um die Testgröße zu ändern. Wenn die Testgröße weniger als 100 % beträgt, hast du außerdem die Möglichkeit, deine Testdauer anzupassen.

Im folgenden Beispiel erhalten 20 % der Empfänger*innen der Kampagne Variante A und weitere 20 % erhalten Variante B. Je nachdem, wie viele dieser Empfänger*innen öffnen, klicken oder eine Bestellung aufgeben (abhängig von der von dir ausgewählten Gewinn-Metrik), wird nach 6 Stunden eine Gewinnerin ausgewählt, und die restlichen Empfänger*innen erhalten die gewinnende Variante.

Nachdem du die Einstellungen des Tests angepasst hast, klicke auf Weiter zur Überprüfung.

Wenn du Inhalte per A/B-Test testest und deine Nachricht basierend auf der Zeitzone der*des jeweiligen Empfänger*in senden möchtest:

1. Lege deine Testgröße auf 100 % fest.
   

2. Wenn du dann deine Kampagne planst, hast du die Option, die lokale Zeitzone der Empfänger*innen als Zeitzone für deinen Versand auszuwählen.
   
   
   

Was sollte bei einem A/B-Test getestet werden?

Du solltest immer nur eine Variable gleichzeitig testen. Wenn du mehrere Variablen gleichzeitig testest, kann es schwierig (oder unmöglich) werden, zu erkennen, welche Variablen zu einer besseren Performance beitragen. Du weißt nicht, was du testen sollst? Klicke auf die unten stehenden Abschnitte, um dir Ausgangspunkte anzusehen.

A/B-Testergebnisse prüfen und eine*n Gewinner*in auswählen (optional)

Navigiere zu der Kampagne, die du testest, um ihren Fortschritt anzusehen und zu sehen, welche Version besser abgeschnitten hat. Wenn die Kampagne noch gesendet wird und du einen laufenden A/B-Test beenden möchtest:

1. Navigiere zum Tab A/B-Test-Ergebnisse einer laufenden Kampagne.
2. Klicke auf das Menü für weitere Optionen neben der Version, die du auswählen möchtest.
3. Klicke auf Als Gewinner wählen.

Wenn du manuell eine*n Gewinner*in auswählst, erhalten alle, die die Kampagne noch nicht erhalten haben, die Gewinnervariante sofort. Wenn die Größe deines A/B-Tests 100 % der Empfänger*innen betrug, sammeln wir während des gesamten Conversion-Fensters für die Nachricht weiterhin Daten, sodass sich der/die Gewinner*in ändern kann, wenn neue Daten eingehen. Weitere Informationen findest du unter So überprüfst du die Ergebnisse deines E-Mail-A/B-Tests für Kampagnen.