무엇을 테스트하나요
테스트 만들기
- **라이브 카트가 자동으로 대조군(control)**이 돼요 — 변경할 수 없어요.
- 다른 카트 중에서 도전자 하나를 선택하세요.
- 트래픽 할당을 설정하세요 — 둘 사이의 분할이며 기본값은 50/50이에요. 각 쪽은 1%에서 99% 사이이고 둘의 합은 100%여야 해요.
- 테스트에 이름을 지정하세요(필수).
- Publish & start test를 누르세요.
테스트 진행 중에는
- 쇼핑객은 하나의 변형에 **고정 배정(stickily bucketed)**되므로, 재방문 쇼핑객은 테스트 기간 내내 같은 카트를 계속 보게 돼요.
- 게시와 게시 취소가 잠기고, 변형 카트는 에디터에서 읽기 전용이에요 — 변경하려면 테스트를 종료하세요.
유의성 표시기
이 표시줄은 준비 상태 표시기예요 — 자신 있는 판단을 내리기에 충분한 트래픽을 수집했는지 알려줘요. 통계적 p-값이 아니며, Aftersell은 승자를 자동으로 선언하지 않아요. 테스트가 충분한 데이터를 수집하게 한 다음, 변형을 비교하고 선택하세요.
테스트 종료 및 승자 선택
테스트 종료 화면의 Revenue 수치는 Test analytics 페이지의 것보다 더 넓어요. 여기서는 카트에 귀속된 모든 전환이에요. Test analytics에서는 Added revenue 지표가 업셀, 애드온, 구독 매출로 좁혀져요. 같은 테스트라도 두 숫자는 다를 것이므로, 두 화면을 넘나들며 비교하기보다는 한 화면 안에서 변형끼리 비교하세요.
테스트할 수 있는 것과 없는 것
- 가능: 어떤 두 개의 전체 카트 구성이든. 레이아웃, 블록, 문구, 디자인을 바꿔 보세요 — 원하는 대로 도전자 카트를 만들어 라이브 카트와 테스트하세요.
- 지표에 대한 주의 사항: Test analytics의 Added revenue 지표는 업셀, 애드온, 구독 매출을 포함해요 — 카트가 벌어들이는 전체의 부분집합이며 완전한 분할이 아니에요. 각 변형의 총 기여도가 아니라 두 변형 간의 동일 조건 비교 지표로 여기세요. 테스트 종료 화면은 위에서 설명한 더 넓은 수치를 사용해요.