실험 섹션 이해하기

학습 내용

실험 섹션을 사용해 A/B 테스트의 성공 여부를 쉽게 분석하는 방법을 알아보세요. 실험 섹션은 캠페인과 플로우에서 실행된 모든 A/B 테스트를 한데 모아, 테스트한 요소, 사용한 마케팅 채널, 성공률, 기타 데이터에 대한 인사이트를 제공해요.

실험 탭으로 이동하기

분석 > 실험 > A/B 테스트로 이동하세요.

실험 섹션에 들어가면 기본적으로 캠페인 탭이 표시돼요. 하지만 캠페인 탭과 플로우 탭을 오가며 클릭해 각 채널별 A/B 테스트를 검토할 수 있어요. 소유자, 관리자, 매니저 및 분석가만 실험 섹션에 액세스할 수 있어요.

검색 및 설정 옵션 사용

캠페인 또는 플로우 탭 상단에서 A/B 테스트 보기 설정을 사용자 지정하고 특정 테스트를 검색할 수 있는 옵션을 확인할 수 있어요.

테스트를 검색하는 중

왼쪽 상단의 검색 필드에 테스트 이름 또는 테스트와 관련된 키워드(예: “블랙프라이데이와 사이버먼데이(BFCM) 환영 테스트” 또는 “환영”)를 입력해 주세요. 검색어를 입력하고 Enter 키를 누르면, 보기 화면이 기준에 맞는 결과 목록으로 좁혀져요.

설정 옵션 조정

각 탭 상단의 드롭다운 메뉴에서는 캠페인 또는 플로우의 A/B 테스트 결과 중 확인할 항목을 더 구체적으로 좁히고 맞춤 설정할 수 있어요.

기간 설정
기간 아래 드롭다운에서 다음 기간의 A/B 테스트 결과를 검토하도록 선택할 수 있어요:

• 오늘
  여기에는 시작 날짜가 지난 1일 이내인 모든 테스트가 포함돼요.
• 지난 7일
  여기에는 지난 7일 이내에 시작일이 있는 모든 테스트가 포함돼요.
• 지난 30일
  여기에는 지난 30일 이내에 시작 날짜가 있는 모든 테스트가 포함돼요.
• 지난 90일
  여기에는 지난 90일 이내에 실행되었거나 현재 실행 중인 모든 테스트가 포함됩니다.
• 올해
  여기에는 현재 달력 연도 시작일부터 오늘까지 시작 날짜가 있는 모든 테스트가 포함돼요.
• 작년
  이전 달력 연도에 시작일이 있었던 모든 테스트가 여기에 포함돼요. 예를 들어 현재가 2023년이라면, 시작일이 2022년인 모든 테스트가 여기에 해당돼요.
• 전체 기간
  여기에는 실행되었거나 현재 실행 중인 모든 테스트가 포함돼요.

마케팅 채널 설정
채널 아래의 드롭다운에서 다음 중에서 결과 범위를 좁히도록 선택할 수 있어요:

• 전체
  이 옵션은 이메일과 SMS A/B 테스트를 모두 표시해요.
• 이메일
  이 옵션은 이메일 A/B 테스트만 표시해요.
• SMS
  이 옵션은 SMS A/B 테스트만 표시해요.

지표 설정
우승 지표 아래의 드롭다운에서 다음을 포함해 특정 우승 지표가 포함된 결과로만 결과 범위를 좁히도록 선택할 수 있어요:

• 이메일 열람률
  이메일 열람률을 승리 지표로 사용하는 A/B 테스트만 확인하세요.
• 전환율
  전환율을 우승 지표로 사용하는 A/B 테스트만 확인할 수 있어요.
• 주문율
  승리 지표로 주문율을 사용하는 A/B 테스트만 확인해요.
• 전체
  이메일 열람률,전환율, 주문 완료등 모든 우수 지표 옵션을 함께 확인하세요.

필터 설정
추가 필터 아래의 드롭다운에서 특정 테스트 유형으로 더 좁혀 볼 수 있는 옵션이 있어요. 예:

• 테스트 유형 (캠페인 탭에서만 사용)
  이 보조 드롭다운에서 모두를 선택하면 모든 유형의 테스트를 확인할 수 있어요. 그렇지 않으면, 이메일의 콘텐츠 또는 요소(예: 다른 미리보기 텍스트와 제목을 사용해 진행하는 테스트)와 관련된 A/B 테스트에는 콘텐츠 테스트를, 최적의 전송 시간을 테스트하는 이메일에는 전송 시간 테스트를 선택하세요.
• 상태
  이 보조 드롭다운에서 현재 실행 중인 A/B 테스트만 보려면 진행 중을, 완료된 테스트를 보려면 완료됨을 선택하세요.

조정한 검색 결과나 설정을 모두 지우려면 지우기를 클릭해 주세요.

수집한 A/B 테스트 결과 검토하기

기본적으로 캠페인 및 플로우 탭은 완료되었거나 현재 실행 중이거나 취소된 모든 A/B 테스트를 수집합니다.

이 표에는 다음 열이 포함돼요.

• 테스트 이름
  캠페인의 실제 이름이에요. 플로우의 경우에는 대신 테스트의 이름이 표시돼요. 이 열에는 캠페인과 플로우 모두에 대해 테스트에서 사용된 우승 지표도 포함돼요.
  테스트 이름을 클릭하면 A/B 테스트 결과 페이지로 이동하며, 특정 같은 이메일의 다른 버전, 데이터, 우승 결과에 대한 자세한 내용을 확인할 수 있어요.
• 채널
  테스트 중인 마케팅 채널로, SMS(말풍선 아이콘으로 표시) 또는 이메일(봉투 아이콘으로 표시)입니다.
  푸시 알림은 현재 A/B 테스트를 할 수 없습니다.
• 테스트 유형 (캠페인 탭에서만)
  연필 아이콘으로 표시되는 콘텐츠 테스트 인지, 시계 아이콘으로 표시되는 전송 시간 테스트 인지 보여줘요.
• 시작 날짜
  A/B 테스트가 처음 시작된 날짜예요.
• 테스트 크기
  모든 같은 이메일의 다른 버전에서 A/B 테스트에 포함된 프로필 수입니다.
• 승리 확률
  다른 같은 이메일의 다른 버전보다 얼마나 더 좋은 성과를 내는지에 따라 특정 같은 이메일의 다른 버전이 더 나은 결과를 낼 가능성이 얼마나 되는지 나타내요. 이 비율은 이러한 같은 이메일의 다른 버전 중 하나를 나타내요.
  각 같은 이메일의 다른 버전을 최소 500명의 수신자가 받았고 해당 같은 이메일의 다른 버전의 승리 확률이 최소 90%일 때 플로우 메시지 같은 이메일의 다른 버전은 통계적으로 유의미 한 것으로 간주돼요. 각 같은 이메일의 다른 버전을 최소 50명의 수신자가 받았고 해당 같은 이메일의 다른 버전의 승리 확률이 최소 90%일 때 캠페인은 통계적으로 유의미 한 것으로 간주돼요.
• 상태
  테스트가 완료되었음을 나타내는 초록색 상태 또는 아직 진행 중임을 나타내는 회색 상태예요.