가입 양식의 표시 설정을 최적화하는 방법
학습 내용
Klaviyo 가입 양식에서 최적화 테스트를 실행해 웹사이트 방문자에게 양식이 표시되는 최적의 시간을 확인하는 방법을 알아보세요. 최적화 테스트에서는 Klaviyo가 AI가 생성한 일련의 실험을 실행해 양식의 제출률을 높이는 데 가장 효과적인 표시 타이밍 설정을 파악해요.
최적화 테스트는 A/B 테스트와 비슷하게, 잘 작동하는 부분이나 개선이 필요한 부분을 파악하는 것이 목적이에요. 하지만 최적화 테스트는 AI를 사용해 표시 타이밍에 대한 같은 이메일의 다른 버전을 선택하고, 연속적인 테스트 단계를 자동으로 실행해 시간을 절약해 줘요.
시작하기 전에 알아야 할 것
최적화 테스트를 진행하려면 프로필이 최소 400,000개(총 프로필 수 기준) 있어야 해요. 임베드된 폼은 최적화 테스트 대상이 아니에요.
최적화 테스트에서는 현재 페이지 보기 같은 이메일의 다른 버전을 지원하지 않으므로, 방문자가 일정 수의 페이지를 본 후 표시하는 타이밍 옵션은 테스트에 반영되지 않아요. 페이지 조회 규칙에 따라 표시되도록 설정된 가입 양식이 있는 경우, 최적화 테스트를 생성하는 옵션이 표시되지 않아요.
최적화 테스트 만들기
원하는 테스트 설정으로 최적화 테스트를 생성하고 실행해 가입 양식에 가장 적합한 표시 타이밍 설정을 확인해 보세요. 테스트가 완료되면, 승리한 버전이 사이트에 라이브로 적용돼요. 컨트롤이 승리하거나 결과가 불확실한 경우에는 기존 표시 타이밍 설정이 그대로 유지돼요.
참고로 가입 양식당 한 번에 최적화 테스트 1개만 실행할 수 있어요.
최적화 테스트를 만들려면:
- 왼쪽 탐색에서 가입 양식을 선택합니다.
- 새 가입 양식을 만들거나, 기존 양식에서 점 3개를 선택한 다음 편집을 선택해 양식 편집기를 열어 주세요.
가입 양식(예: 최적화 테스트가 실행되는 동안 스타일, 콘텐츠, 동작 등을 변경할 수 있어요. 최적화 테스트가 실행 중일 때 변경해야 하는 경우, 테스트를 종료하고 원하는 변경 사항을 적용한 다음 새 테스트를 시작할 수 있어요.
- 편집기 왼쪽 사이드바에서 A/B 테스트 만들기 비커 아이콘을 선택한 다음, 열리는 패널에서 A/B 테스트 만들기를 선택하세요.

- 최적화 테스트를 선택하세요. A/B 테스트가 현재 진행 중이면 최적화 테스트를 시작할 수 없어요.

- 테스트 이름에서 테스트의 기본 이름을 변경할 수 있어요. 그 아래에서 컨트롤 옆의 타이밍 설정을 확인해 주세요. 컨트롤은 현재 사용 중인 양식이에요.
양식의 트래픽이 낮으면, 테스트에 최대 90일이 걸릴 수 있다는 경고가 표시돼요. 더 많은 트래픽이 있는 양식을 사용해 더 빨리 충분한 데이터를 수집하는 것도 고려해 보세요.
- 테스트 설정으로 계속하기를 선택하세요.
- 일반 탭에서 테스트 그룹의 트래픽 비율(%)을 입력해 주세요. 나머지 트래픽은 대조 그룹으로 이동해요:
- 컨트롤 그룹
이 그룹은 항상 현재 버전의 양식을 보게 되는 그룹이에요. - 테스트 그룹
최적화 테스트 단계 전반에 걸쳐 테스트되는 그룹이에요.
- 컨트롤 그룹

- 선택 사항: AI가 사용할 수 있는 표시 규칙을 선택하려면 고급 설정 탭을 선택하세요. 시간 지연, 스크롤 비율, 종료 의도 같은 이메일의 다른 버전을 허용하고, 최소 시간 지연 또는 최소 스크롤 비율을 설정할 수 있어요. 테스트를 시작하려면 시간 지연 같은 이메일의 다른 버전 허용, 스크롤 비율 같은 이메일의 다른 버전 허용 또는 둘 다를 선택된 상태로 유지하세요.

- 사이트에 테스트를 게시할 준비가 되면 최적화 시작을 선택하세요.
테스트는 현재 양식과 표시 타이밍 같은 이메일의 다른 버전을 비교하는 학습 단계로 시작해요. Klaviyo는 결과를 사용해 이후 반복 단계에서 사용할 같은 이메일의 다른 버전을 선택해요. 테스트는 최종 비교 후 추가 개선 가능성이 낮을 때, 3번 연속 반복 단계에서 동일한 설정이 선택될 때, 또는 같은 이메일의 다른 버전이 반복해서 컨트롤보다 성과가 나쁠 때 종료될 수 있어요. 테스트는 최대 90일 동안 실행돼요. 테스트가 종료되면 우승 설정이 자동으로 라이브로 전환되고, 결론이 나지 않은 결과는 컨트롤을 유지해요.
진행 중인 최적화 테스트 모니터링
최적화 테스트가 실행 중일 때 모니터링하려면:
- 기본 탐색에서 가입 양식을 선택하세요.
- 진행 중인 최적화 테스트가 있는 양식을 클릭하세요. 상태 열에 작은 “최적화 실행 중” 배너가 표시됩니다.
- 메뉴 표시줄에서 A/B 테스트 결과 탭을 클릭하세요.
- 상단 드롭다운이 최적화 테스트로 설정되어 있는지 확인하고, 확인하려는 테스트 이름도 함께 선택해 주세요.

여기에서 학습 및 반복 단계의 타임라인을 포함해 진행 중인 최적화 테스트의 개요와, 진행 중인 단계에 대한 다음 결과를 확인할 수 있어요:
- 제출률 향상
대조 그룹의 제출률과 가장 성과가 좋은 같은 이메일의 다른 버전의 제출률 간 백분율 차이입니다. - 승리 확률
같은 이메일의 다른 버전이 대조군보다 더 나은 성과를 낼 가능성의 백분율입니다. - 현재 성과가 가장 좋은 같은 이메일의 다른 버전
현재 단계에서 성과가 가장 좋은 테스트 같은 이메일의 다른 버전의 표시 타이밍 설정이에요. 테스트 그룹 트래픽 비율은 테스트 이름 아래에 표시돼요.

A/B 테스트 결과 탭의 하단에는 최적화 테스트의 각 단계(진행 중인 단계 포함)를 보여주는 결과 표가 표시돼요. 각 단계는 다음 기준으로 세분화돼요:
- 시작 날짜
이 단계가 시작된 날짜예요. - 적격 고유 조회수
이 테스트 단계에서 가입 양식을 볼 자격이 있는 고유 사용자의 수입니다. 표시 타이밍을 테스트하고 있으므로, 가입 양식 같은 이메일의 다른 버전을 정확하게 비교할 수 있도록 양식을 볼 수 있었던 고유 사용자 수를 기준으로 조회수를 집계해요. - 제출률
고유 양식 제출 이벤트 수를, 같은 이메일의 다른 버전을 볼 자격이 있는 고유 사용자 수(자격이 있는 고유 조회수)로 나눈 값이에요. 예를 들어, 고유 사용자 2명이 같은 이메일의 다른 버전을 볼 자격이 있고 그중 1명이 제출하면, 제출률은 50%로 표시돼요. - 승리 확률
대조군과 비교해 테스트 중인 같은 이메일의 다른 버전의 승리 확률입니다. - 요금 인상 제출
대조군과 비교하여 제출률이 증가한 비율입니다.
어느 단계에서든 드롭다운 화살표를 클릭해 대조군의 주요 세부 정보와 데이터를 확인하고, 단계 동안 테스트된 각 같은 이메일의 다른 버전에 대한 원시 데이터(즉, Submit rate, Win probability, 및 Submit rate lift)의 세부 내역도 확인하세요.

단계는 최소 2일이 지나고, 테스트 중인 컨트롤과 같은 이메일의 다른 버전 모두 적격 고유 조회수가 최소 600회 이상일 때 종료돼요. 학습 단계에서는 여러 같은 이메일의 다른 버전을 대조군과 비교해 테스트할 때, 같은 이메일의 다른 버전이 적격 고유 조회수를 평균 600회 이상 충족해야 해요. 또는 1일 후 컨트롤 그룹의 성과가 통계적으로 유의미하게 더 좋으면 단계가 종료돼요.
최적화 테스트가 진행되는 동안과 종료된 후에 각 단계의 데이터를 확인할 수 있어요.
최적화 테스트 이름 편집
최적화 테스트가 진행 중일 때 이름을 수정하려면 다음을 수행하세요:
- 가입 양식 페이지에서 최적화 테스트가 실행 중인 양식을 선택해 주세요.
- A/B 테스트 결과 탭을 클릭한 다음, 최적화 테스트와 이름을 변경하려는 테스트 이름을 선택해 주세요.
- 오른쪽 상단에서 점 3개를 선택한 다음 세부 정보 편집을 클릭합니다.

- 테스트 이름에서 현재 이름을 원하는 이름으로 바꿔 주세요.
- 저장을 클릭합니다.

최적화 테스트 중에 양식 편집하기
최적화 테스트가 진행 중인 동안에는 가입 양식 자체를 편집할 수 없어요. 진행 중인 테스트가 있는 가입 양식의 편집기에 들어가면, 양식을 편집하기 위해 테스트를 종료할지 여부와 종료 방법을 묻는 모달이 표시돼요. 다음 중 하나를 선택할 수 있습니다.
- 제어 그룹 같은 이메일의 다른 버전 유지
원래 형식과 표시 타이밍 설정을 그대로 유지해요. 이 선택은 테스트에서 제어 그룹이 가장 좋은 성과를 냈다는 의미는 아니에요. - 대조군을 가장 성과가 좋은 같은 이메일의 다른 버전으로 교체
원래 양식의 표시 타이밍 설정을 현재 단계에서 성과가 가장 좋은 테스트 같은 이메일의 다른 버전의 설정으로 바꿔요. 이 같은 이메일의 다른 버전이 여전히 대조군보다 성과가 낮을 수 있으니, 선택하기 전에 제출률 상승폭을 확인해 주세요.

선택한 내용을 확인하고 양식 편집기를 열려면 테스트 종료를 선택해 주세요. 가입 양식을 수정하기 위해 진행 중인 테스트를 종료하면, 다시 시작하려면 새 최적화 테스트를 만들어야 해요.
최적화 테스트를 수동으로 종료
트래픽 분배 또는 허용된 표시 타이밍 같은 이메일의 다른 버전을 변경하려면 현재 최적화 테스트를 종료하고 원하는 설정으로 새 테스트를 생성해 주세요. 테스트를 종료하려면:
- 가입 양식 페이지에서 최적화 테스트가 실행 중인 양식을 선택해 주세요.
- A/B 테스트 결과 탭을 클릭한 다음 최적화 테스트와 종료하려는 테스트 이름을 선택해 주세요.
- 오른쪽 상단에서 점 3개를 선택한 다음 테스트 종료를 선택해 주세요.

- 확인 대화상자에서 원래 타이밍 설정을 유지하려면 컨트롤 같은 이메일의 다른 버전 유지를 선택하고, 현재 단계에서 성과가 가장 높은 테스트 같은 이메일의 다른 버전을 사용하려면 컨트롤을 최고 성과 같은 이메일의 다른 버전으로 바꾸기를 선택해 주세요. 컨트롤을 바꾸기 전에 제출률 상승폭을 확인해 주세요.

컨트롤을 가장 성과가 좋은 같은 이메일의 다른 버전으로 교체를 선택하면, 확인할 때 원래 가입 양식이 해당 같은 이메일의 다른 버전의 표시 설정으로 자동 업데이트돼요.
- 테스트 종료를 선택해 주세요.
우승한 같은 이메일의 다른 버전이 선택되는 방식
최적화 테스트가 자동으로 종료되면, 가입 양식이 승리한 표시 타이밍 설정으로 업데이트되거나 대조군이 선택된 경우에는 그대로 유지돼요. A/B 테스트 결과 페이지에서 테스트 상태가 라이브에서 완료됨으로 변경돼요.
자동으로 완료된 테스트의 경우, 분석할 수 있도록 테스트 개요와 최종 결과가 표시되며 3가지 결과 중 1가지가 나타나요:
- 최적화 성공: 우승한 같은 이메일의 다른 버전이 식별되었어요
- AI 테스트에서 대조군보다 더 좋은 성과를 낸 같은 이메일의 다른 버전을 확인했어요. 우승한 같은 이메일의 다른 버전에 대한 설명은 우승한 같은 이메일의 다른 버전 아래에 표시돼요.
- 성공적으로 최적화됨: 컨트롤이 승자입니다.
- Klaviyo에서 컨트롤을 우승 버전으로 선택했으므로, 양식은 기존 표시 타이밍 설정을 그대로 유지해요. 이 설정은 우승한 같은 이메일의 다른 버전 - 컨트롤 아래에 표시돼요. 컨트롤이 비교를 위한 기준이기 때문에 제출률 상승 카드에는 대시(-)가 표시돼요.
- 결정되지 않은 결과:
- 테스트에서 확정적인 결과가 나오지 않았어요. 이는 90일 제한에 도달했거나, 최종 비교에서 예측된 승자가 확인되지 않을 때 발생할 수 있어요. 컨트롤이 승리한 같은 이메일의 다른 버전으로 유지되며, 제출률 증가 카드에는 대시가 표시돼요.
다음 단계
가입 양식에서 새 구독자로부터 수집된 정보를 더 자세히 살펴보려면 가입 양식 응답을 확인하는 방법을 확인하세요.
웹사이트에서 여러 가입 양식을 라이브로 사용 중이라면, 여러 가입 양식이 동시에 표시되지 않도록 충돌 방지 표시 설정을 활성화 하는 것을 고려하세요.
추가 자료
- 가입 양식을 A/B 테스트하는 방법
A/B 테스트를 사용해 가입 양식의 다양한 요소 성과를 평가하는 방법을 알아보세요. 결과를 효과적으로 분석하면 폼이 사이트 방문자에게 공감대를 형성하고 리스트 성장에 기여하도록 할 수 있어요.
- 가입 양식의 타겟팅 및 행동 설정에 대해 이해합니다.
가입 양식 편집기의 타겟팅 및 행동 섹션에 대해 자세히 알아보세요. 여기에서 양식이 사이트에 표시되는 시기와 양식을 보는 사람을 제어하고 변경할 수 있습니다. 기존 가입 양식의 양식 편집기를 연 다음 타겟팅 및 동작을 선택하여 이 가이드에서 다루는 표시 및 타겟팅 설정을 조정합니다.
- Creating strategic sign-up forms