Jak testować A/B kampanie e-mailowe
Czego się dowiesz
Dowiedz się, jak skonfigurować i uruchomić test A/B dla kampanii, jak odczytać wyniki testu i kilka przypadków użycia Testy A/B kampanie. KlaviyoFunkcja Testy A/B dla kampanii umożliwia łatwe testowanie różnych tematów wiadomości, treści wiadomości i czasu wysyłki, dzięki czemu możesz lepiej zrozumieć, co działa najlepiej dla Twoich odbiorców.
Utwórz test A/B dla kampanii e-mailUtwórz test A/B dla kampanii e-mail
- Przejdź do kampanie > Utwórz kampanie.
- Na pasku bocznym nazwij swoją kampanię.
- Wybierz e-mail , a następnie kliknij Kontynuuj.
- Wybierz listę lub segment, do którego chcesz wysłać wiadomość.
- Kliknij przycisk Dalej.
- Wprowadź temat wiadomości i, w razie potrzeby, edytuj tekst podglądu, nazwę nadawcy i adres e-mail nadawcy.
- Utwórz pierwszą wersję wiadomości e-mail, dodając tekst, obrazy i linki.
- Nad polem tematu wiadomości kliknij przycisk Utwórz test A/B.
- Spowoduje to automatyczne utworzenie drugiego, identycznego wariantu Twojej kampanii i przeniesienie Cię na stronę testu A/B kampanii.
- Spowoduje to automatyczne utworzenie drugiego, identycznego wariantu Twojej kampanii i przeniesienie Cię na stronę testu A/B kampanii.
- W każdym polu nazwy wariantu dodaj opisową nazwę wariantu, która odnosi się do tego, co testujesz A / B, np.
Skonfiguruj swój wariant testowy
Teraz, gdy utworzyłeś już test, zdecyduj, który element kampanii chcesz przetestować, aby skonstruować różne warianty kampanii.
Przetestuj temat wiadomości ze sztuczną inteligencjąPrzetestuj temat wiadomości ze sztuczną inteligencją
Ta funkcja jest dostępna tylko dla płatnego konta Klaviyo. Jeśli Twoje konto nie kwalifikuje się, przejdź do następnej opcji: Testuj zawartość.
Zamiast tworzyć test ręcznie, możesz również zautomatyzować jego tworzenie za pomocą sztucznej inteligencji. Ta funkcja służy w szczególności do testowania tematów wiadomości.
- Utwórz kampanie e-mailowe, korzystając z kroków opisanych w poprzedniej sekcji.
- Wybierz szablon i edytuj treść wiadomości e-mail.
- Pod polem Temat wiadomości wybierz jedną z opcji w sekcji Wygeneruj wariant do testu A/B.
Po wybraniu opcji sztuczna inteligencja utworzy test z 2 wariantami wykorzystującymi różne, ale podobne tytuły, w tym Twój oryginalny tytuł dla wariantu A i jeden wygenerowany przez sztuczną inteligencję na podstawie podpowiedzi wybranej dla wariantu B.
Dostępne opcje będą zależeć od wprowadzonego tematu wiadomości, ale przykłady obejmują:
-
Personalizacja vs brak personalizacji
Wariant B będzie zawierał imię klienta w temacie wiadomości lub usunie jego imię, jeśli zostało pierwotnie uwzględnione. -
Krótki vs. długi
wariant B będzie miał krótszy lub dłuższy temat wiadomości w zależności od długości Twojego oryginalnego tematu. -
Pytania vs stwierdzenia
wariant B przekształci Twój oryginalny temat wiadomości w pytanie lub w stwierdzenie, jeśli pierwotnie było to pytanie. -
Emoji vs brak emoji
Wariant B będzie zawierał odpowiednie emoji w temacie wiadomości lub usunie wszelkie emoji, jeśli zostały one pierwotnie uwzględnione.
Przeczytaj resztę tego artykułu, aby dowiedzieć się, jak dalej edytować i wysyłać test A/B po jego utworzeniu.
Testowana treśćTestowana treść
Możesz przetestować treść wiadomości, aby określić, co odbiorcy chcą zobaczyć. Kliknij Testuj zawartość w górnej części strony.
Edytuj jeden z wariantów testu A/B. W testach A/B ważne jest, aby porównywać jeden czynnik na raz, więc jeśli edytujesz temat wiadomości, nie zmieniaj niczego innego. Jeśli chcesz, możesz dodać więcej wariantów, klikając przycisk klonuj na karcie konkretnego wariantu, ale zalecamy tylko 2 warianty.
Test czas wysyłkiTest czas wysyłki
Możesz także przetestować czas wysyłki, aby określić, kiedy Twoi odbiorcy chcą od Ciebie usłyszeć. Kliknij Test czas wysyłki w górnej części strony.
Testując czas wysyłki, zachowaj dokładnie taką samą treść i temat wiadomości obu wariantów.
Jeśli nie wiesz, od czego zacząć, zalecamy wypróbowanie wieczornej pory. Alternatywnie, jeśli się kwalifikujesz, możesz zamiast tego użyć Inteligentny czas wysyłki.
Wybierz strategię testowaniaWybierz strategię testowania
Opcja wyboru strategii testowej jest dostępna tylko dla kont z łączną liczbą profili przekraczającą 400 000. Jeśli Twoje konto nie zakwalifikuje się, Klaviyo zastosuje zwycięską strategię testowania wariantów.
Jeśli Twoje konto się kwalifikuje, wybierz strategię testowania spośród poniższych opcji:
- Zwycięski wariant (standardowy test A/B)
- Spersonalizowane warianty dla każdego odbiorcy
Różnica między wariantem wygrywającym a wariantem spersonalizowanym
Obie opcje strategii testowej wyślą wariant do grupy testowej składającej się z procentu całkowitej liczby odbiorców kampanii i przetestują powodzenie wiadomości w oparciu o wybraną przez Ciebie metrykę, np. wskaźnik wyświetleń wiadomości. Istnieją jednak pewne kluczowe różnice w sposobie, w jaki każda strategia wysyła wiadomości do reszty odbiorców po zakończeniu okresu testowego:
- Zwycięski wariant - domyślna opcja dla testów A/B, która określi 1 zwycięski wariant i wyśle go do reszty odbiorców kampanii po zakończeniu okresu testowego.
- Spersonalizowany wariant - wykorzystuje sztuczną inteligencję do wyszukiwania wzorców wśród testowych odbiorców, którzy wchodzą w interakcję z każdym wariantem. Po zakończeniu okresu testowego Klaviyo przewidzi, który wariant będzie lepszy dla każdego odbiorcy i wyśle pozostałym odbiorcom preferowany wariant.
Spersonalizuj wariant dla każdego odbiorcy
Jeśli chcesz spersonalizować wariant, który każdy odbiorca otrzymuje indywidualnie, wybierz opcję Spersonalizowany wariant dla każdego odbiorcy.
Klaviyo użyje informacji o każdym profilu, aby określić, który wariant najprawdopodobniej odniesie sukces w konwersji tego profilu. Te informacje profilowe obejmują między innymi:
- Historyczne stawki za zaangażowanie
- Wartość życiowa klienta (CLV)
- Położenie
Na przykład, jeśli wybrałeś wskaźnik wyświetleń wiadomości jako swoją zwycięską metrykę, a profil w grupie testowej z wartością życiową klienta 100 lub więcej częściej otwiera wariant A, ale profil z wartością życiową klienta mniejszą niż 100 częściej otwiera wariant B, pozostali odbiorcy kampanii będą otrzymywać wiadomości e-mail na podstawie tego, który wariant najprawdopodobniej otworzą zgodnie z ich wartością życiową klienta. Jest to uproszczony przykład, ponieważ Klaviyo użyje wielu punktów danych do określenia spersonalizowanego wariantu.
Skonfiguruj ustawienia testu A/BSkonfiguruj ustawienia testu A/B
Po utworzeniu treści zdecyduj o wielkości puli testowej i długości okresu testowego.
Najpierw wybierz zwycięską metrykę, czyli główną metrykę, którą chcesz poprawić. Wybierz spośród:
-
Wskaźnik wyświetleń wiadomości
Zalecane podczas testowania tematu wiadomości, podglądu tekstu lub nazwy nadawcy i adresu e-mail. -
wskaźnik kliknięć
Zalecane podczas testowania treści wiadomości e-mail, takich jak rozmiar lub kolor przycisku. -
Złożony wskaźnik zamówień
Dostępne tylko dla kont z metryką złożonego zamówienia i niedostępne dla wariantów spersonalizowanych. Jest to zalecane podczas testowania treści wiadomości e-mail, np. czy wyświetlanie bestsellerów lub nowych produktów prowadzi do większej liczby konwersji.
W przypadku urządzeń Apple korzystających z systemów iOS15, macOS Monterey, iPadOS 15 i WatchOS 8 lub ich nowszych wersji, funkcja Apple Mail Privacy Protection (MPP) zmieniła sposób, w jaki otrzymujemy wskaźnik wyświetleń wiadomości danych w Twojej wiadomości e-mail poprzez wstępne pobieranie naszego piksela śledzenia. W związku z tą zmianą ważne jest, aby zrozumieć, że wskaźnik wyświetleń wiadomości może być zawyżony.
Jeśli chodzi o Testy A/B, Klaviyo powinien mieć konto dla tych zawyżonych wskaźników wyświetleń wiadomości; jednak możesz potrzebować wyższego progu, aby dotrzeć do istotności statystycznej. Jeśli regularnie przeprowadzasz testy A/B ORAZ masz więcej niż ~45% otwarć w Apple Mail, sugerujemy utworzenie niestandardowego raportu zawierającego właściwość MPP. Możesz również zidentyfikować te otwarcia w swoim indywidualnym segmencie subskrybenta.
Aby uzyskać pełne informacje na temat otwarcia MPP, odwiedź nasz przewodnik iOS 15: Wszystko, co musisz wiedzieć o zmianach Apple.
Zalecamy wielkość testu w oparciu o wielkość Twojej listy i czas trwania testu w oparciu o metrykę testu A/B (tj. otwarcia, kliknięcia lub złożone zamówienia). W razie potrzeby użyj suwaka, aby zmienić rozmiar testu. Jeśli rozmiar testu jest mniejszy niż 100%, masz również możliwość dostosowania czasu trwania testu.
W poniższym przykładzie 20% odbiorców kampanii otrzyma wariant A, a kolejnych 20% otrzyma wariant B. W zależności od tego, ilu z tych odbiorców otworzy, kliknie lub złoży zamówienie (w zależności od wybranej przez Ciebie zwycięskiej metryki), po 6 godzinach zostanie wybrany zwycięzca, a pozostali odbiorcy otrzymają zwycięski wariant.
Po dostosowaniu ustawień testu kliknij Kontynuuj, aby przejrzeć.
Jeśli testujesz zawartość A/B i chcesz wysłać wiadomość w oparciu o strefę czasową każdego odbiorcy:
- Ustaw rozmiar testu na 100%.
- Następnie, podczas planowania kampanii, będziesz mieć możliwość wybrania lokalnej strefy czasowej odbiorcy jako strefy czasowej wysyłki.
Co testować A/B
Powinieneś testować tylko jedną zmienną na raz. Testowanie wielu zmiennych jednocześnie może utrudnić (lub uniemożliwić) określenie, które zmienne przyczyniają się do poprawy wydajności. Nie wiesz, co przetestować? Kliknij poniższe sekcje, aby wyświetlić punkty początkowe.
Testy, które poprawią Twój wskaźnik zamówieńTesty, które poprawią Twój wskaźnik zamówień
Aby sprawdzić, co skłania odbiorców do składania zamówień, spróbuj przetestować dowolne z poniższych elementów w swoich wiadomościach:
- Dowód społeczny (np. dołączanie do wiadomości pozytywnych recenzji lub postów klienta na media ).
- czas wysyłki, dzień tygodnia lub weekendy kontra dni powszednie
- wezwanie do działania (CTA) (CTA) umiejscowienie (np. na górze wiadomości e-mail lub na dole)
Testy, które poprawią Twój wskaźnik kliknięćTesty, które poprawią Twój wskaźnik kliknięć
Aby sprawdzić, co skłania odbiorców do klikania linków w wiadomościach, spróbuj przetestować jedną z poniższych opcji:
- Wygląd wezwania do działania (np. czcionka, kolor lub rozmiar przycisku lub tekstu).
- Tekst CTA (np. "Kup teraz" kontra "Sprawdź to!")
- organizacja szablonu (np. sposób, w jaki rozmieszczasz obrazy i tekst w wiadomości)
- Obrazy a pliki GIF
Testy, które poprawią Twój wskaźnik wyświetleń wiadomościTesty, które poprawią Twój wskaźnik wyświetleń wiadomości
Aby określić, co skłania subskrybentów do otwierania wiadomości e-mail, spróbuj przetestować jedną z poniższych opcji:
- temat wiadomości testy:
- Stwierdzenia kontra pytania (np. "Musisz zobaczyć nasz najnowszy drop" kontra "Chcesz zobaczyć nasz najnowszy drop?").
- temat wiadomości długość
- personalizacja tematu wiadomości (np. umieszczenie imienia odbiorcy w temacie wiadomości za pomocą znacznika {{ first_name|default:’Friend’ }} )
- Emoji w temacie wiadomości
- Tekst podglądu (np. włączenie lub wyłączenie tekstu podglądu)
- Od nazwy (np. nazwa Twojej firmy w porównaniu do bardziej osobistej nazwy Od, jak "Elise na Klaviyo").
- czas wysyłki, dzień tygodnia lub weekendy kontra dni powszednie
Przejrzyj wyniki testów A/B i wybierz zwycięzcę (opcjonalnie).
Przejdź do testowanej kampanii, aby zobaczyć jej postępy i sprawdzić, która wersja działa lepiej. Jeśli kampania jest nadal wysyłana i chcesz zakończyć trwający test A/B:
- Przejdź do zakładki Wyniki testów A/B trwającej kampanii.
- Kliknij menu dodatkowych opcji obok wersji, którą chcesz wybrać.
- Kliknij Wybierz jako zwycięzcę.
Gdy ręcznie wybierzesz zwycięzcę, każdy, kto jeszcze nie otrzymał kampanii, natychmiast otrzyma zwycięski wariant. Jeśli Twój rozmiar testu A/B wynosił 100% odbiorców, będziemy kontynuować zbieranie danych przez cały okres konwersji wiadomości, więc zwycięzca może się zmienić, gdy pojawią się nowe dane. Aby uzyskać więcej informacji, przejdź na stronę płatności przejdź do kasy Jak przejrzeć wyniki testów A/B wiadomości e-mail dla kampanii.
Dodatkowe źródła