Du wirst lernen
Hier erfährst du, wie du einen A/B-Test für eine Kampagne einrichtest und durchführst, wie du die Testergebnisse ausliest und welche Anwendungsfälle es für A/B-Tests bei Kampagnen gibt. KlaviyoMit der A/B-Testing-Funktion von Kampagne kannst du ganz einfach verschiedene Betreffs, Nachrichteninhalte und Versandzeitpunkte testen, damit du besser verstehen kannst, was bei deiner Zielgruppe am besten ankommt.
Wie man A/B-Tests für Kampagnen-E-Mails durchführtWie man A/B-Tests für Kampagnen-E-Mails durchführt
- Navigiere zu Kampagne > Kampagne erstellen.
- Wähle in der Seitenleiste E-Mail.
- Benenne deine Kampagne und klicke auf Weiter.
- Wähle die Liste oder das Segment aus, an die du senden möchtest.
- Klicke auf Weiter.
- Gib den Betreff ein und bearbeite, falls gewünscht, den Vorschautext, den Absendernamen und die Absender-E-Mail-Adresse.
- Erstelle die erste Version deiner E-Mail und füge deine Texte, Bilder und Links hinzu.
- Klicke oberhalb des Feldes Betreff auf A/B-Test erstellen. Dadurch wird automatisch eine zweite, identische Variante deiner Kampagne erstellt und du gelangst auf die A/B-Test-Seite der Kampagne.
- Füge in jedes Variation Namensfeld einen beschreibenden Variationsnamen ein, der sich auf das bezieht, was du im A/B-Test testest, z.B. "Sommerstart E-Mail - weiße Buttons".
Automatisiere A/B-Tests mit KI
Diese Funktion ist nur für bezahlte Klaviyo-Konten verfügbar. Wenn dein Konto nicht qualifiziert ist, überspringe diesen Abschnitt.
Anstatt einen Test manuell zu erstellen, kannst du ihn auch mithilfe von KI automatisieren. Diese Funktion dient vor allem dazu, Betreff zu testen.
- Erstelle eine E-Mail-Kampagne anhand der Schritte aus dem vorherigen Abschnitt.
- Wähle eine Vorlage und bearbeite den Inhalt der E-Mail.
- Unterhalb des Feldes Betreff wählst du eine der Optionen im Abschnitt Eine Variation für den A/B-Test generieren aus.
Nachdem du dich für eine Option entschieden hast, erstellt die KI einen Test mit 2 Variationen mit unterschiedlichen, aber ähnlichen Titeln, einschließlich deines Originaltitels für Variation A und eines Titels, den die KI auf der Grundlage der ausgewählten Aufforderung für Variation B generiert.
Welche Optionen zur Verfügung stehen, hängt von dem eingegebenen Betreff ab, aber Beispiele sind:
-
Personalisierung vs. keine Personalisierung
Variation B fügt den Vornamen des Kunden in den Betreff ein oder entfernt ihn, wenn er ursprünglich enthalten war. -
Kurz vs. lang
Variation B hat entweder einen kürzeren oder längeren Betreff, je nachdem, wie lang dein ursprüngliches Motiv ist. -
Fragen vs. Aussagen
Variation B wandelt deinen ursprünglichen Betreff in eine Frage oder in eine Aussage um, wenn es ursprünglich eine Frage war. -
Emoji vs. kein Emoji
Variation B fügt ein entsprechendes Emoji in den Betreff ein oder entfernt alle Emojis, wenn sie ursprünglich enthalten waren.
Lies den Rest dieses Artikels, um zu erfahren, wie du deinen A/B-Test weiter bearbeitest und versendest, nachdem er erstellt wurde.
Inhalt der PrüfungInhalt der Prüfung
Du kannst den Inhalt deiner Nachricht testen, um herauszufinden, was dein Publikum sehen möchte. Klicke oben auf der Seite auf Inhalt testen.
Bearbeite eine der Variationen für deinen A/B-Test. Bei A/B-Tests ist es wichtig, immer nur einen Faktor zu vergleichen. Wenn du also den Betreff bearbeitest, darfst du nichts anderes ändern.
klonen eine Variation
Wenn du möchtest, kannst du weitere Variationen hinzufügen, indem du auf die Schaltfläche klonen auf der Karte für eine bestimmte Variation klickst, aber wir empfehlen nur 2 Variationen.
Test VersandzeitpunktTest Versandzeitpunkt
Du kannst auch den Versandzeitpunkt testen, um herauszufinden, wann dein Publikum von dir hören will. Klicke oben auf der Seite auf Versandzeitpunkt testen.
Wenn du den Versandzeitpunkt testest, halte den Inhalt und den Betreff beider Varianten genau gleich.
Wenn du nicht weißt, wo du anfangen sollst, empfehlen wir dir, es abends zu versuchen. Wenn du die Voraussetzungen erfüllst, kannst du stattdessen auch den Smarter Versandzeitpunkt nutzen.
Wähle eine TeststrategieWähle eine Teststrategie
Die Option, eine Teststrategie zu wählen, ist nur für Konten mit mehr als 400.000 Gesamtprofil verfügbar. Wenn sich dein Konto nicht qualifiziert, wird Klaviyo die Teststrategie der Gewinnvariante verwenden.
Wenn dein Konto die Voraussetzungen erfüllt, wähle deine Teststrategie aus den folgenden Optionen:
- Gewinnende Variante (Standard A/B-Test)
- Personalisierte Variante für jeden Empfänger
Der Unterschied zwischen gewinnender Variation und personalisierter Variation
Bei beiden Teststrategien wird die Variation an eine Testgruppe gesendet, die sich aus einem Prozentsatz der Gesamtempfänger der Kampagne zusammensetzt, und der Erfolg der Nachricht wird anhand einer von dir gewählten Metrik getestet, z. B. der Öffnungsrate. Es gibt jedoch einige wichtige Unterschiede in der Art und Weise, wie die einzelnen Strategien nach dem Testzeitraum Nachrichten an die übrigen Empfänger/innen senden:
- Gewinner-Variante - die Standardoption für A/B-Tests, bei der eine Gewinner-Variante ermittelt und nach Ablauf des Testzeitraums an die übrigen Empfänger der Kampagne gesendet wird.
- Personalisierte Variation - nutzt KI, um nach Mustern unter den Testempfängern zu suchen, die mit jeder Variation interagieren. Nach Ablauf der Testphase wird Klaviyo vorhersagen, welche Variante bei den einzelnen Empfängern besser abschneidet, und den übrigen Empfängern ihre bevorzugte Variante schicken.
Personalisiere die Variation für jeden Empfänger
Wenn du die Variation, die jeder Empfänger erhält, individuell gestalten möchtest, wähle die Option Personalisierte Variation für jeden Empfänger.
Klaviyo verwendet die Informationen über jedes Profil, um zu bestimmen, welche Variante am wahrscheinlichsten erfolgreich ist, um das Profil zu konvertieren. Zu diesen Profilinformationen gehören unter anderem:
- Historische Kundenbindungsraten
- Kundenlebenszeitwert (Customer Lifetime Value)
- Standort
Wenn du zum Beispiel die Öffnungsrate als gewinnende Metrik gewählt hast und Profile in der Testgruppe mit einem Customer Lifetime Value von 100 oder mehr häufiger Variante A öffnen, Profile mit einem Customer Lifetime Value von weniger als 100 aber häufiger Variante B, erhalten die übrigen Empfänger der Kampagne E-Mails auf der Grundlage der Variante, die sie entsprechend ihres Customer Lifetime Value am ehesten öffnen. Dies ist ein vereinfachtes Beispiel, da Klaviyo viele Datenpunkte verwendet, um die personalisierte Variation zu bestimmen.
Einstellungen für A/B-Tests konfigurierenEinstellungen für A/B-Tests konfigurieren
Nachdem du deine Inhalte erstellt hast, entscheidest du über die Größe deines Testpools und die Länge deines Testzeitraums.
Wähle zunächst die Gewinner-Metrik, also die Hauptmetrik, die du verbessern möchtest. Wähle aus:
-
Öffnungsrate
Empfohlen, wenn du Betreff, Vorschautext oder Absendername/E-Mail-Adresse testest. -
Klickrate
Empfohlen für das Testen von E-Mail-Inhalten, wie z.B. Buttongröße oder Farbe. -
Platzierte Bestellrate
Nur verfügbar für Konten mit einer Placed Order Metrik und nicht verfügbar für personalisierte Variationen. Dies empfiehlt sich, wenn du E-Mail-Inhalte testest, z.B. ob die Anzeige von Bestsellern oder neuen Artikeln zu mehr Conversion führt.
Für Apple-Geräte, die iOS15, macOS Monterey, iPadOS 15 und WatchOS 8 oder neuere Versionen verwenden, hat Apple Mail Privacy Protection (MPP) die Art und Weise geändert, wie wir Daten zur Öffnungsrate deiner E-Mail erhalten, indem unser Tracking-Pixel vorgeholt wird. Bei dieser Änderung ist es wichtig zu verstehen, dass die Öffnungsrate erhöht wird.
Im Hinblick auf A/B-Tests gehen wir davon aus, dass unsere Tools diese überhöhten Öffnungsraten berücksichtigen sollten; allerdings brauchst du möglicherweise einen höheren Schwellenwert, um statistische Signifikanz zu erreichen. Wenn du regelmäßig A/B-Tests durchführst UND mehr als ~45% der Öffnungen auf Apple Mail hast, empfehlen wir, einen benutzerdefinierten Bericht zu erstellen, der eine MPP-Eigenschaft enthält. Du kannst diese Eröffnungen auch in deinem individuellen Abonnentensegment identifizieren.
Ausführliche Informationen zu den MPP-Öffnungen findest du in unserem Leitfaden iOS 15: Alles, was du über Apples Änderungen wissen musst.
Wir empfehlen eine Testgröße, die sich nach der Größe deiner Liste richtet, und eine Testdauer, die sich nach der Metrik des A/B-Tests richtet (d.h. Öffnungen, Klicks oder Bestellungen). Verwende den Schieberegler, um die Testgröße zu ändern, falls gewünscht. Wenn die Testgröße weniger als 100% beträgt, hast du auch die Möglichkeit, die Testdauer anzupassen.
Im folgenden Beispiel erhalten 20 % der Empfänger der Kampagne die Variante A und weitere 20 % die Variante B. Je nachdem, wie viele dieser Empfänger die Kampagne öffnen, anklicken oder eine Bestellung aufgeben (abhängig von der von dir gewählten Gewinnmetrik), wird nach 6 Stunden ein Gewinner ermittelt, und die restlichen Empfänger erhalten die Gewinnvariante.
Nachdem du die Einstellungen für den Test angepasst hast, klickst du auf "Weiter", um ihn zu überprüfen.
Wenn du A/B-Tests durchführst und deine Nachricht je nach Zeitzone des Empfängers versenden möchtest:
- Setze deine Testgröße auf 100%.
- Bei der Planung deiner Kampagne hast du dann die Möglichkeit, die lokale Zeitzone des Empfängers als Zeitzone für den Versand zu wählen.
Was man A/B testen sollte
Du solltest immer nur eine Variable auf einmal testen. Das gleichzeitige Testen mehrerer Variablen kann es schwierig (oder unmöglich) machen, herauszufinden, welche Variablen zur Leistungssteigerung beitragen. Du weißt nicht, was du testen sollst? Klicke auf die Abschnitte unten, um die Startpunkte zu sehen.
Tests zur Verbesserung deiner BestellrateTests zur Verbesserung deiner Bestellrate
Um herauszufinden, was deine Empfänger dazu bringt, Bestellungen aufzugeben, kannst du in deinen Nachrichten eine der folgenden Optionen ausprobieren:
- Social Proof (z.B. positive Bewertungen oder Posts von Kunden in sozialen Medien in deine Nachrichten einbauen)
- Versandzeitpunkt, Wochentag oder Wochenende versus Wochentag
- Platzierung des CTA (Call-To-Action) (z.B. ganz oben in der E-Mail oder weiter unten)
Tests zur Verbesserung deiner KlickratenTests zur Verbesserung deiner Klickraten
Um herauszufinden, was deine Empfänger dazu bringt, auf Links in deinen Nachrichten zu klicken, kannst du eine der folgenden Möglichkeiten ausprobieren:
- Aussehen des CTA (z. B. Schriftart, Farbe oder Größe der Schaltfläche oder des Textes)
- CTA-Text (z.B. "Jetzt einkaufen" versus "Schau es dir an!")
- Gestaltung der Vorlage (z.B. wie du die Bilder und den Text in deiner Nachricht anordnest)
- Bilder versus GIFs
Tests zur Verbesserung deiner ÖffnungsrateTests zur Verbesserung deiner Öffnungsrate
Um herauszufinden, was deinen Abonnenten zum Öffnen deiner E-Mail veranlasst, kannst du eine der folgenden Möglichkeiten ausprobieren:
- Betreff Tests:
- Aussagen statt Fragen (z.B. "Du musst unsere neueste Kollektion sehen" statt "Willst du unsere neueste Kollektion sehen?")
- Betreff Länge
- Betreff-Personalisierung (z. B. Einfügen des Vornamens des Empfängers in den Betreff mit dem {{ first_name|default:’Friend’ }} Tag)
- Emojis in Betreff
- Vorschautext (z. B. mit oder ohne Vorschautext)
- Von-Name (z.B. dein Unternehmensname im Vergleich zu einem persönlicheren Von-Namen, wie "Elise bei Klaviyo")
- Versandzeitpunkt, Wochentag oder Wochenende versus Wochentag
Überprüfe die A/B-Testergebnisse und wähle einen Gewinner (optional)
Navigiere zu der Kampagne, die du testest, um den Fortschritt zu sehen und herauszufinden, welche Version besser abgeschnitten hat. Wenn du einen laufenden A/B-Test beenden möchtest:
- Navigiere zur Registerkarte A/B-Testergebnisse einer laufenden Kampagne.
- Klicke auf das Menü mit den zusätzlichen Optionen neben der Version, die du auswählen möchtest.
- Klicke auf Als Gewinner auswählen.
Wenn du manuell einen Gewinner auswählst, erhält jeder, der die Kampagne noch nicht erhalten hat, sofort die Gewinnvariante. Wenn deine A/B-Testgröße 100% der Empfänger betrug, sammeln wir während des gesamten Conversion-Fensters für die Nachricht weiterhin Daten, sodass sich der Gewinner ändern kann, wenn neue Daten eintreffen. Weitere Informationen findest du unter Wie du die Ergebnisse deiner E-Mail-A/B-Tests für die Kampagne überprüfst.
Zusätzliche Ressourcen
Zusätzliche Ressourcen