플로우의 이메일 A/B 테스트 결과를 검토하는 방법
학습 내용
플로우 메시지의 A/B 테스트 결과를 검토하는 방법과 결과 페이지의 각 지표가 무엇을 의미하는지 알아보세요.
플로우 메시지를 A/B 테스트하면 대상 고객에 대한 유용한 인사이트를 얻을 수 있어요. Klaviyo를 사용하면 발송 전략을 어떻게 변경해야 하는지 쉽게 판단할 수 있어요. A/B 테스트의 승리한 같은 이메일의 다른 버전을 알 수 있을 뿐만 아니라, 승리한 지표 세부정보와 같은 다른 중요한 요소도 확인할 수 있어요.
A/B 테스트 결과 페이지 보기
테스트 결과를 볼 수 있는 옵션은 게시된 테스트에만 표시돼요. 여기에는 현재 실행 중인 테스트와 완료된 테스트가 모두 포함돼요. 테스트를 생성하고 게시하는 방법에 대해 자세히 알아보려면 플로우 이메일을 A/B 테스트하는 방법 문서를 참고해 주세요.
테스트가 실행 중이거나 완료된 후 결과를 보려면 다음 단계를 따르세요:
- 플로우 빌더에서 게시된 A/B 테스트가 있는 이메일을 클릭해 주세요.
- 오른쪽 세부정보 사이드바에서 테스트 보기를 클릭하세요.
자동으로 A/B 테스트 결과 탭으로 이동하며, 여기에서 현재 또는 가장 최근 A/B 테스트의 결과를 볼 수 있어요.
이전 테스트의 결과를 보려면 페이지 왼쪽 상단에서 테스트 이름 드롭다운을 열고 이전 테스트 이름을 선택해 결과를 확인해 보세요(아래 예시 참고).
결과 페이지는 두 부분으로 나뉩니다:
- 테스트 개요
- 같은 이메일의 다른 버전
테스트 개요
테스트 개요 섹션에서 테스트 결과의 스냅샷을 확인할 수 있어요.
현재 실행 중인 테스트에는 다음 섹션이 표시됩니다:
- 승리 확률
어떤 같은 이메일의 다른 버전이 승리할 가능성이 높은지, 그리고 특정 같은 이메일의 다른 버전이 승리할 확률(퍼센트) - 승리 지표
테스트 설정 중에 구성한 승리 지표(즉, 전환율 또는 이메일 열람률)와 결과가 통계적으로 유의미한지 여부, 그리고 다른 같은 이메일의 다른 버전과 비교했을 때 승리한 같은 이메일의 다른 버전의 승리 지표가 얼마나 더 높은지에 대한 백분율이에요. 단, 승자를 수동으로 선택한 경우에는 표시되지 않아요. - 테스트 이름
결과를 보고 있는 테스트의 이름 - 상태
테스트가 실행 중인지 또는 완료되었는지 - 시작 날짜
계정에 설정된 시간대 기준으로 테스트가 시작된 날짜 및 시간 - 현재 가중치
같은 이메일의 다른 버전 목록 및 무작위로 선택된 수신자 중 각 같은 이메일의 다른 버전을 받은 비율
다음 섹션에는 완료된 테스트에 대해 다음 항목이 표시돼요:
- 승자
승리 지표를 기준으로 어떤 같은 이메일의 다른 버전이 승리했나요? - 테스트 이름
결과를 보고 있는 테스트의 이름 - 상태
테스트가 실행 중인지 또는 완료되었는지 - 시작 날짜
계정에 설정된 시간대 기준으로 테스트가 시작된 날짜 및 시간 - 종료일
계정에 설정된 표준 시간대에서 테스트가 완료된 날짜와 시간
같은 이메일의 다른 버전
같은 이메일의 다른 버전 섹션에서 같은 이메일의 다른 버전별로 시간 경과에 따른 우승 지표 차트와 각 같은 이메일의 다른 버전의 카드가 표시돼요.
다음 지표는 같은 이메일의 다른 버전별로 추적돼요.
- 수신자
이메일을 받은 사람 수 - 열람
이메일을 연 사람의 비율/수 - 클릭
이메일에서 클릭한 사람의 비율/수 - 전환 지표
선택한 전환 지표 및 해당 지표를 통해 전환한 수신자 수
대부분의 전자상거래 연동에서 기본 전환 지표는 Placed Order예요. 이 지표를 사용하면 카드에 주문율과 주문을 완료한 수신자 수가 표시돼요.
각 같은 이메일의 다른 버전에 커서를 올리면 같은 이메일의 다른 버전을 미리 보는 옵션과 템플릿으로 저장하는 옵션이 표시돼요.
추가 자료
- How to A/B test a flow email
Learn how to use Klaviyo’s A/B testing experience to test individual emails in a flow, including things like subject line, discounts, and email content, etc. You can even use A/B tests to determine if plain-text emails perform better than image-heavy HTML emails.
- How to A/B test an email campaign
Learn how to set up and run an A/B test for a campaign, how to read the test results, and a few use cases for A/B testing campaigns. Klaviyo's A/B testing feature for campaigns allows you to easily test different subject lines, message content, and send times so you can better understand what works best for your audience.
- How to A/B test a sign-up form
Learn how to use A/B testing to evaluate the performance of various elements of your sign-up forms. By effectively analyzing the results, you can ensure that your forms resonate with site visitors and contribute to list growth.