학습 내용

Klaviyo 가입 양식에서 최적화 테스트를 실행해 웹사이트 방문자에게 양식이 표시되는 최적의 시간을 확인하는 방법을 알아보세요. 최적화 테스트에서는 Klaviyo가 AI가 생성한 일련의 실험을 실행해 양식의 제출률을 높이는 데 가장 효과적인 표시 타이밍 설정을 파악해요.

최적화 테스트는 A/B 테스트와 비슷하게, 잘 작동하는 영역과 개선이 필요한 영역을 파악하는 것을 목적으로 해요. 하지만 최적화 테스트는 AI를 사용하며, 시간을 절약하고 더 정확한 결과를 제공할 수 있도록 완전 자동화되어 있어요.

시작하기 전에 알아야 할 것

최적화 테스트를 사용하려면 최소 400,000개의 프로필(총 프로필 수 기준)이 있어야 해요.

최적화 테스트 만들기

원하는 테스트 설정으로 최적화 테스트를 생성하고 실행하여 가입 양식에 대한 최적의 표시 타이밍 설정을 결정하세요. AI 최적화 테스트를 완료하면 가입 양식이 새 표시 타이밍 설정으로 자동 업데이트되며, 해당 버전이 사이트에서 라이브로 적용돼요.

한 번에 1개의 최적화 테스트만 실행할 수 있다는 점에 유의해 주세요.

최적화 테스트를 만들려면:

  1. 왼쪽 탐색에서 가입 양식을 선택합니다.
  2. 새 가입 양식을 만들거나, 점 3개를 선택한 다음 양식 편집을 선택해 기존 양식의 양식 편집기를 여세요.

가입 양식(예: 최적화 테스트가 실행되는 동안 스타일, 콘텐츠, 동작 등을 변경할 수 있어요. 최적화 테스트가 실행 중일 때 변경해야 하는 경우, 테스트를 종료하고 원하는 변경 사항을 적용한 다음 새 테스트를 시작할 수 있어요.

  1. 왼쪽 상단에서 A/B 테스트 만들기를 선택하세요.
The Create A/B Test button highlighted and being selected from the top menu bar in the sign-up form editor.
The Create A/B Test button highlighted and being selected from the top menu bar in the sign-up form editor.
  1. 최적화 테스트를 선택하세요. A/B 테스트가 현재 진행 중이면 최적화 테스트를 시작할 수 없어요.
The Create Test popup that appears when you click Create A/B test on a sign-up form, and Optimization test selected from the test options on the menu.
The Create Test popup that appears when you click Create A/B test on a sign-up form, and Optimization test selected from the test options on the menu.
  1. 테스트 이름에서 테스트의 기본 이름을 변경할 수 있어요. 아래에서 설정 옆의 컨트롤 그룹 타이밍 설정을 확인해 주세요. 컨트롤은 현재 양식이에요.
  2. 테스트 설정으로 계속하기를 선택하세요.
  3. 표시되는 테스트 설정 모달에서 각 그룹의 트래픽 비율을 선택하세요:
    • 컨트롤 그룹
      이 그룹은 항상 현재 버전의 양식을 보게 되는 그룹이에요.
    • 테스트 그룹
      최적화 테스트 단계 전반에 걸쳐 테스트되는 그룹이에요.
  1. 선택 사항: AI가 현재 가입 양식과 비교해 생성하고 테스트할 같은 이메일의 다른 버전 유형을 더 구체적으로 지정하려면 고급 설정 탭을 선택하세요. 여기에서 테스트에 포함하지 않으려는 타이밍 설정을 제거하거나, 시간 지연 또는 스크롤 비율 값을 지정할 수 있어요.

The Create Test modal showing the Advanced settings options where you can select the display rules that Klaviyo AI will use to create variations in an optimization test.
The Create Test modal showing the Advanced settings options where you can select the display rules that Klaviyo AI will use to create variations in an optimization test.

최적화 테스트는 현재 페이지 조회수 같은 이메일의 다른 버전을 허용하지 않으므로, 방문자가 특정 페이지 수를 확인한 후 표시하도록 하는 타이밍 옵션은 테스트에서 고려되지 않아요. 페이지 조회수 규칙을 기반으로 표시되도록 설정된 가입 양식이 있으면, 최적화 테스트를 생성하는 옵션이 표시되지 않아요.

  1. 테스트 설정을 선택했으면 최적화 시작을 선택하세요.
    • 가입 양식에 트래픽이 충분하지 않으면, Klaviyo에서 이 양식에 대한 최적화 테스트 실행을 권장하지 않는다는 안내 문구가 표시돼요. 가장 정확한 결과를 확인하려면 트래픽이 더 많은 가입 양식에서 최적화 테스트를 실행하는 것을 권장해요. 트래픽이 적은 양식에서 테스트를 실행하도록 선택하면, 테스트는 최대 90일 동안 실행돼요.

최적화 테스트는 AI를 사용해 테스트 설정에 따라 서로 다른 표시 타이밍 설정을 가진 같은 이메일의 다른 버전과 현재 양식을 비교하며 테스트하고 측정하는 여러 단계를 거쳐 진행돼요. 1단계 이후, Klaviyo는 2단계와 3단계에서 계속 테스트하기 위해 더 많은 데이터가 필요하다고 판단되는 같은 이메일의 다른 버전을 선택해요. 실험 프로세스는 AI가 양식 같은 이메일의 다른 버전을 3번 추천할 때까지, 또는 테스트 시작 후 90일이 경과할 때까지 계속 실행돼요. 어느 쪽이든 해당 시점에 테스트가 종료되며, AI가 식별한 최적의 표시 타이밍 설정이 가입 양식에 자동으로 업데이트돼요.

진행 중인 최적화 테스트 모니터링

최적화 테스트가 실행 중일 때 모니터링하려면:

  1. 기본 탐색에서 가입 양식을 선택하세요.
  2. 진행 중인 최적화 테스트가 있는 양식을 클릭하세요. 상태 열에 작은 “최적화 실행 중” 배너가 표시됩니다.
  3. 메뉴 표시줄에서 A/B 테스트 결과 탭을 클릭해 주세요.
  4. 상단의 드롭다운이 최적화 테스트로 설정되어 있는지, 그리고 확인하려는 테스트 이름이 함께 설정되어 있는지 확인해 주세요.
The A/B test results tab a form with the ongoing optimization test showing the two dropdown menus at the top set to Optimization test and the correct name of your test, respectively.
The A/B test results tab a form with the ongoing optimization test showing the two dropdown menus at the top set to Optimization test and the correct name of your test, respectively.

여기에서 진행 중인 최적화 테스트의 개요를 확인할 수 있어요. 여기에는 테스트 중인 가입 양식의 시각적 자료와, 진행 중인 단계에 대한 다음 결과의 세부 내역이 포함돼요:

  • 제출률 향상
    대조 그룹의 제출률과 가장 성과가 좋은 같은 이메일의 다른 버전의 제출률 간 백분율 차이입니다.
  • 승리 확률
    같은 이메일의 다른 버전이 대조군보다 더 나은 성과를 낼 가능성의 백분율입니다.
  • 트래픽 분배
    처음 테스트를 생성할 때 선택한 트래픽 비율이에요. 각각 대조군과 테스트 같은 이메일의 다른 버전(양식의 AI 생성 버전)으로 얼마나 많은 트래픽이 이동하는지를 나타내요.
The top half of the Optimization test results page where you can view an overview of the test's planned phases, and cards depicting submit rate lift, win probability card, and traffic distribution.
The top half of the Optimization test results page where you can view an overview of the test's planned phases, and cards depicting submit rate lift, win probability card, and traffic distribution.

A/B 테스트 결과 탭의 하단에는 최적화 테스트에서 완료된 각 단계를 표시하는 결과 표가 표시돼요. 각 단계는 다음 기준으로 나뉘어요.

  • 시작 날짜
    이 단계가 시작된 날짜예요.
  • 적격 고유 조회수
    이 테스트 단계에서 가입 양식을 볼 자격이 있는 고유 사용자의 수입니다. 표시 타이밍을 테스트하고 있으므로, 가입 양식 같은 이메일의 다른 버전을 정확하게 비교할 수 있도록 양식을 볼 수 있었던 고유 사용자 수를 기준으로 조회수를 집계해요.
  • 적격 제출률
    고유 제출 양식 이벤트 수를 양식 같은 이메일의 다른 버전을 볼 자격이 있는 고유 사용자 수(적격 고유 조회수)로 나눈 값입니다. 예를 들어 고유 사용자 2명이 양식 같은 이메일의 다른 버전을 보고, 그중 1명이 양식을 제출하면 제출률은 50%로 표시돼요.
  • 승리 확률
    대조군과 비교해 테스트 중인 같은 이메일의 다른 버전의 승리 확률입니다.
  • 요금 인상 제출
    대조군과 비교하여 제출률이 증가한 비율입니다.

어느 단계에서든 드롭다운 화살표를 클릭해 대조군의 주요 세부 정보와 데이터를 확인하고, 단계 동안 테스트된 각 같은 이메일의 다른 버전에 대한 원시 데이터(즉, Submit rate, Win probability, Submit rate lift)의 세부 내역도 확인하세요.

The table at the bottom on the Optimization test results page where you can see a breakdown of data across for completed phase and variation in the test thus far.
The table at the bottom on the Optimization test results page where you can see a breakdown of data across for completed phase and variation in the test thus far.

단계는 최소 2일이 지나고, 테스트 중인 컨트롤과 같은 이메일의 다른 버전 모두 최소 600회의 조회수를 받으면 종료돼요. 1단계에서는 여러 같은 이메일의 다른 버전을 컨트롤과 비교해 테스트할 때, 같은 이메일의 다른 버전들의 평균이 600회의 조회수여야 해요. 또는 1일 후 컨트롤 그룹의 성과가 통계적으로 유의미하게 더 좋으면 단계가 종료돼요.

최적화 테스트는 여러 연속 단계에서 최적의 표시 타이밍 설정을 가진 것으로 1개의 폼 같은 이메일의 다른 버전이 식별될 때까지 단계를 계속 실행해요. 최적화 테스트가 끝나면 각 단계의 원시 데이터를 확인할 수 있어요.

최적화 테스트 이름 편집

진행 중인 최적화 테스트의 이름을 수정하려면:

  1. 가입 양식 페이지에서 최적화 테스트가 실행 중인 양식을 선택하세요.
  2. A/B 테스트 결과 탭을 클릭하세요.
  3. 오른쪽 상단에서 점 3개를 선택한 다음 세부 정보 편집을 클릭합니다.
The option to Edit details being selected from the 3 dots dropdown menu in the top right corner of the Optimization test results page.
The option to Edit details being selected from the 3 dots dropdown menu in the top right corner of the Optimization test results page.
  1. 테스트 이름에서 현재 이름을 원하는 이름으로 바꿔 주세요.
  2. 저장을 클릭합니다.
The Rename optimization test popup where you can change the test name that you previously set.
The Rename optimization test popup where you can change the test name that you previously set.

최적화 테스트가 진행 중인 동안에는 가입 양식 자체를 편집할 수 없어요. 진행 중인 테스트가 있는 가입 양식의 편집기에 들어가면, 양식을 편집하기 위해 테스트를 종료할지 여부와 종료 방법을 묻는 모달이 표시돼요. 다음 중 하나를 선택할 수 있습니다.

  • 컨트롤 같은 이메일의 다른 버전 유지
    이 옵션을 선택하면 테스트 중에 서로 다른 같은 이메일의 다른 버전과 비교 테스트한 가입 양식인 컨트롤을 가장 성과가 좋은 같은 이메일의 다른 버전으로 선택하는 것을 의미해요. 참고: 이 테스트를 처음 시작할 때 사용한 가입 양식이므로 변경 사항이 적용되지 않아요.
  • 대조군을 가장 성과가 좋은 같은 이메일의 다른 버전으로 대체
    이 옵션을 선택하면 가장 최근 테스트 단계에서 가장 성과가 좋은 같은 이메일의 다른 버전을 선택해 가장 성과가 좋은 같은 이메일의 다른 버전으로 설정하는 것을 의미합니다. Klaviyo는 테스트를 시작할 때 사용한 가입 양식을 가장 성과가 좋은 가입 양식 같은 이메일의 다른 버전으로 대체합니다.
The Editing your form will end the optimization test modal that appears if you attempt to enter the sign-up form editor for a form with an optimization test in progress.
The Editing your form will end the optimization test modal that appears if you attempt to enter the sign-up form editor for a form with an optimization test in progress.

가입 양식을 수정하기 위해 진행 중인 테스트를 종료하면, 다시 시작하려면 새 최적화 테스트를 만들어야 해요.

최적화 테스트를 수동으로 종료

테스트 설정(예: 사이트 트래픽 분배 또는 같은 이메일의 다른 버전 선택 설정)을 조정해야 하는 경우, 결과가 나와 승자가 결정될 때까지 기다리지 않고 최적화 테스트를 수동으로 종료할 수 있어요. 방법은 다음과 같아요:

  1. 가입 양식 페이지에서 최적화 테스트가 실행 중인 양식을 선택하세요.
  2. A/B 테스트 결과 탭을 클릭하세요.
  3. 오른쪽 상단에서 점 3개를 선택한 다음 테스트 종료를 선택해 주세요.
The option to End test being selected from the 3 dots dropdown menu in the top right corner of the Optimization test results page.
The option to End test being selected from the 3 dots dropdown menu in the top right corner of the Optimization test results page.
  1. 확인 모달에서 최종 선택된 같은 이메일의 다른 버전을 선택하세요. 컨트롤 그룹 또는 테스트의 현재 단계에서 최종 선택된 같은 이메일의 다른 버전을 선택할 수 있어요.
The End test popup where you can opt to manually end an optimization test and choose to either Keep control variation, or to Replace control with the highest performing variation thus far.
The End test popup where you can opt to manually end an optimization test and choose to either Keep control variation, or to Replace control with the highest performing variation thus far.

승리한 같은 이메일의 다른 버전으로 현재 우승자를 선택하면 원래 가입 양식이 해당 표시 설정으로 자동 업데이트돼요.

  1. 승자를 선택하고 테스트 종료를 선택하세요.

우승한 같은 이메일의 다른 버전이 선택되는 방식

최적화 테스트가 완료되면 가입 양식이 자동으로 우승한 표시 타이밍 설정으로 업데이트되거나, 컨트롤이 이긴 경우에는 그대로 유지되며, A/B 테스트 결과 페이지에서 테스트 상태가 라이브에서 완료됨으로 변경돼요.

이 단계에서는 테스트와 최종 결과에 대한 개요가 분석용으로 표시되며, 3가지 결과 중 1가지가 표시돼요:

  1. 최적화 성공: 우승한 같은 이메일의 다른 버전이 식별되었어요
    • AI 테스트에서 대조군보다 더 좋은 성과를 낸 같은 이메일의 다른 버전을 확인했어요. 우승한 같은 이메일의 다른 버전에 대한 설명은 우승한 같은 이메일의 다른 버전 아래에 표시돼요.
  2. 성공적으로 최적화됨: 컨트롤이 승자입니다.
    • 컨트롤이 테스트된 모든 같은 이메일의 다른 버전을 능가했어요. 제출률 상승은 0%로 표시되며, 컨트롤의 표시 타이밍 설정에 대한 설명이 승리한 같은 이메일의 다른 버전 아래에 표시돼요.
  3. 결정되지 않은 결과:
    • AI 테스트는 여러 단계를 실행했음에도 90일 동안 충분한 데이터가 없어 결론을 내릴 수 있는 결과에 도달하지 못했어요. 이로 인해 대조군이 우승한 같은 이메일의 다른 버전으로 표시되며, 제출률 상승은 0%를 반영해요.

다음 단계

가입 양식에서 새 구독자로부터 수집된 정보를 더 자세히 살펴보려면 가입 양식 응답을 확인하는 방법을 확인하세요.

웹사이트에서 여러 가입 양식을 라이브로 사용 중이라면, 여러 가입 양식이 동시에 표시되지 않도록 충돌 방지 표시 설정을 활성화 하는 것을 고려하세요.

추가 자료

  • How to A/B test a sign-up form

    Learn how to use A/B testing to evaluate the performance of various elements of your sign-up forms. By effectively analyzing the results, you can ensure that your forms resonate with site visitors and contribute to list growth.

  • Understanding targeting and behavior settings for sign-up forms

    Learn about the Targeting & behavior section of the sign-up form editor, where you can control and change when a form appears on your site, and who sees it. Open the form editor for an existing sign-up form, then select Targeting & behavior to adjust the display and targeting settings covered in this guide.

  • Creating strategic sign-up forms
이 도움말 문서가 유용했나요?
이 형식은 도움말 문서 피드백 용도로만 사용하세요. 지원 팀에 문의하는 방법.

Klaviyo에서 자세히 살펴보기

커뮤니티
동료, 파트너, Klaviyo 전문가와 연결되어 영감을 받고 인사이트를 공유하며, 모든 궁금한 사항에 대해 답을 얻으세요.
파트너
특정 작업을 도와주거나 지속적인 마케팅 관리를 위해 Klaviyo 인증 전문가를 고용하세요.
지원

계정을 통해 지원에 액세스하세요.

이메일 지원 (무료 체험 및 유료 계정) 연중무휴 24시간 사용 가능

채팅/가상 비서
사용 가능 여부는 위치 및 요금제 유형에 따라 다름