Jak przeprowadzić test A/B kampanii e-mailowej

Czego się dowiesz?

Dowiedz się, jak skonfigurować i przeprowadzić testy A/B dla kampanii, jak odczytywać wyniki testu oraz poznaj kilka przypadków użycia testów A/B w kampaniach. Funkcje testów A/B w Klaviyo dla kampanii umożliwiają łatwe testowanie różnych tematów wiadomości, treści wiadomości i czasu wysyłki, dzięki czemu lepiej zrozumiesz, co najlepiej działa w przypadku Twoich odbiorców.

Utwórz test A/B dla e-maili kampanii

1. Przejdź do Kampanie > Utwórz kampanię.
2. Na pasku bocznym nadaj nazwę swojej kampanii.
3. Wybierz E-mail , a następnie kliknij Kontynuuj.
4. Wybierz listy lub segmenty, do których chcesz wysłać wiadomość.
5. Kliknij przycisk Dalej.
6. Wprowadź temat wiadomości i, jeśli chcesz, edytuj tekst podglądu, nazwę nadawcy i adres e-mail nadawcy.
7. Utwórz pierwszą wersję wiadomości e-mail, dodając tekst, obrazy i linki.
8. Nad polem tematu wiadomości kliknij Utwórz test A/B.
   • To automatycznie tworzy drugi, identyczny wariant Twojej kampanii i przenosi Cię na stronę Test A/B kampanii.
     

9. W każdym polu Nazwa wariantu dodaj opisową nazwę wariantu, która odnosi się do tego, co jest testowane w ramach Testów A/B, np. „E-mail z premierą letniej kolekcji – białe przyciski”.
   

Skonfiguruj warianty testu

Teraz, gdy utworzono test, zdecyduj, które elementy w kampanii przetestować pod kątem skuteczności, aby móc utworzyć różne warianty kampanii.

Testuj temat wiadomości z AI

Zamiast tworzyć test ręcznie, możesz też zautomatyzować jego tworzenie za pomocą AI. Ta funkcja służy w szczególności do testowania tematu wiadomości.

1. Utwórz kampanię e-mail, wykonując kroki z poprzedniej sekcji.
2. Wybierz szablon i edytuj treść e-maila.
3. Pod polem temat wiadomości wybierz jedną z opcji w sekcji Wygeneruj wariant do testu A/B.
   

Po wybraniu opcji AI utworzy test z 2 wariantami, używając różnych, ale podobnych tytułów, w tym Twojego oryginalnego tytułu dla wariantu A oraz tytułu wygenerowanego przez AI na podstawie wybranego promptu dla wariantu B.

Dostępne opcje będą zależeć od tematu wiadomości, który wpisano, ale przykłady obejmują:

• Personalizacja a brak personalizacji
  Wariant B będzie zawierać imię klienta w temacie wiadomości lub usunie jego imię, jeśli zostało pierwotnie uwzględnione.
• Krótszy a dłuższy
  Wariant B będzie miał krótszy lub dłuższy temat wiadomości w zależności od długości oryginalnego tematu.
• Pytanie a stwierdzenie
  Wariant B przekształci pierwotny temat wiadomości w pytanie lub w stwierdzenie, jeśli pierwotnie był to temat w formie pytania.
• Emoji vs bez emoji
  Wariant B będzie zawierał odpowiednie emoji w temacie wiadomości lub usunie wszelkie emoji, jeśli były pierwotnie uwzględnione.

Przeczytaj resztę tego artykułu, aby poznać kroki, jak dalej edytować i wysłać test A/B po jego utworzeniu.

Testowana treść

Możesz przetestować treść wiadomości, aby określić, co Twoi odbiorcy chcą zobaczyć. Kliknij Testuj treść u góry strony.

Edytuj jeden z wariantów testu A/B. Ważne jest, aby testy A/B porównywały jeden czynnik na raz, więc jeśli edytujesz temat wiadomości, nie zmieniaj niczego innego. W razie potrzeby można dodać więcej wariantów, klikając przycisk Klonuj na karcie dla konkretnego wariantu, ale zalecamy tylko 2 warianty.

Przetestuj czas wysyłki

Możesz także testować czasy wysyłki, aby określić, kiedy Twoi odbiorcy chcą otrzymywać od Ciebie wiadomości. Kliknij Testuj czasy wysyłki u góry strony.

Podczas testowania czasu wysyłki zachowaj dokładnie taką samą treść i temat wiadomości w obu wariantach.

Jeśli nie wiesz, od czego zacząć, zalecamy wypróbowanie godziny wieczornej. Alternatywnie, jeśli się kwalifikujesz, możesz zamiast tego użyć Inteligentnego czasu wysyłki.

Wybierz strategię testowania

Jeśli konto się kwalifikuje, zdecyduj o strategii testów, wybierając jedną z poniższych opcji:

• Zwycięski wariant (standardowy test A/B)
• Spersonalizowane warianty dla każdego odbiorcy

Różnica między zwycięskim wariantem a spersonalizowanymi wariantami

Obie opcje strategii testowej wyślą warianty do grupy testowej złożonej z odsetka całkowitej liczby odbiorców kampanii i ocenią skuteczność wiadomości testowej na podstawie wybranej metryki, np. wskaźnika wyświetleń wiadomości. Istnieją jednak pewne kluczowe różnice w tym, jak każda strategia wysyła wiadomości do pozostałych odbiorców po zakończeniu okresu testowego:

• Zwycięski wariant — domyślna opcja testów A/B, która wyłoni 1 zwycięski wariant i wyśle go do pozostałych odbiorców kampanii po zakończeniu okresu testowego.
• Spersonalizowane warianty — wykorzystuje SI do wyszukiwania wzorców wśród odbiorców testu, którzy wchodzą w interakcję z każdym wariantem. Po zakończeniu okresu testów Klaviyo przewidzi, który wariant będzie działać lepiej dla każdego odbiorcy, i wyśle pozostałym odbiorcom preferowany wariant.

Spersonalizuj warianty dla każdego odbiorcy

Jeśli chcesz spersonalizować, który wariant otrzyma każdy odbiorca indywidualnie, wybierz Spersonalizowane warianty dla każdego odbiorcy.

Klaviyo wykorzysta informacje o każdym profilu, aby określić, który wariant ma największe szanse na powodzenie w konwersji tego profilu. Te informacje o profilu obejmują między innymi:

• Historyczne wskaźniki zaangażowania
• Wartość życiowa klienta (CLV)
• Położenie

Na przykład, jeśli wybrano wskaźnik wyświetleń wiadomości jako zwycięską metrykę i profile z grupy testowej o wartości życiowej klienta 100 lub więcej częściej otwierają wariant A, ale profile o wartości życiowej klienta poniżej 100 częściej otwierają wariant B, pozostali odbiorcy kampanii będą otrzymywać e-maile na podstawie tego, który wariant najprawdopodobniej otworzą zgodnie z ich wartością życiową klienta. To uproszczony przykład, ponieważ Klaviyo wykorzysta wiele punktów danych do określenia spersonalizowanych wariantów.

Skonfiguruj ustawienia testu A/B

Po utworzeniu treści zdecyduj o rozmiarze grupy testowej i długości okresu testowania.

Najpierw wybierz metrykę zwycięstwa — główną metrykę, którą chcesz poprawić. Wybierz z:

• Wskaźnik wyświetleń wiadomości
  Zalecane podczas testowania tematu wiadomości, tekstu podglądu lub nazwy nadawcy oraz adresu e‑mail.
• Wskaźnik kliknięć
  Zalecane podczas testowania treści wiadomości e-mail, np. rozmiaru lub koloru przycisku.
• Wskaźnik zamówień
  Dostępne tylko dla kont z metryką Placed Order i niedostępne dla spersonalizowanych wariantów. Jest to zalecane podczas testowania treści e-maili, na przykład czy wyświetlanie bestsellerów lub nowych produktów prowadzi do większej liczby konwersji.

Zalecamy wielkość próby na podstawie wielkości listy oraz czas trwania testu na podstawie metryki testu A/B (tj. otwarć, kliknięć lub złożonych zamówień). W razie potrzeby użyj suwaka, aby zmienić wielkość próby. Jeśli wielkość próby jest mniejsza niż 100%, masz też możliwość dostosowania czasu trwania testu.

W poniższym przykładzie 20% odbiorców kampanii otrzyma wariant A, a kolejne 20% otrzyma wariant B. W zależności od tego, ilu z tych odbiorców otworzy wiadomość, kliknie lub złoży zamówienie (w zależności od wybranej metryki zwycięstwa), zwycięzca zostanie wybrany po 6 godzinach, a pozostali odbiorcy otrzymają zwycięski wariant.

Po dostosowaniu ustawień testu kliknij Przejdź dalej do przeglądu.

Jeśli prowadzisz Testy A/B treści i chcesz wysyłać wiadomość na podstawie strefy czasowej każdego odbiorcy:

1. Ustaw rozmiar testu na 100%.
   

2. Następnie podczas planowania kampanii pojawi się opcja wybrania Lokalna strefa czasowa odbiorcy jako strefy czasowej wysyłki.
   
   
   

Co testować w ramach testu A/B

Należy testować tylko jedną zmienną naraz. Testowanie wielu zmiennych jednocześnie może utrudnić (lub uniemożliwić) zidentyfikowanie, które zmienne przyczyniają się do poprawy wyników. Nie wiesz, co testować? Kliknij sekcje poniżej, aby wyświetlić punkty wyjścia.

Sprawdź wyniki testu A/B i wybierz zwycięzcę (opcjonalnie)

Przejdź do kampanii, którą testujesz, aby wyświetlić jej postęp i sprawdzić, która wersja wypadła lepiej. Jeśli kampania nadal jest wysyłana i chcesz zakończyć trwający test A/B:

1. Przejdź do karty Wyniki testu A/B w trwającej kampanii.
2. Kliknij menu dodatkowych opcji obok wersji, którą chcesz wybrać.
3. Kliknij Wybierz zwycięską opcję.

Gdy ręcznie wybierzesz zwycięzcę, każda osoba, która nie otrzymała jeszcze kampanii, natychmiast otrzyma zwycięski wariant. Jeśli rozmiar testu A/B wynosił 100% odbiorców, będziemy nadal zbierać dane w całym oknie konwersji dla wiadomości, więc zwycięzca może się zmienić, gdy napłyną nowe dane. Aby dowiedzieć się więcej, zapoznaj się z Jak sprawdzić wyniki testu A/B e-maili dla kampanii.

Dodatkowe źródła