Skip to main content
A/B 테스트를 사용하면 실제 쇼핑객 트래픽으로 라이브 장바구니를 초안 장바구니 변형과 비교할 수 있어요. Upcart는 선택한 할당 비율에 따라 들어오는 트래픽을 두 변형 사이에 자동으로 분배하고, 변형별 분석을 추적하며, 준비가 되면 승자를 선언할 수 있게 해줘요.

작동 방식

각 A/B 테스트는 다음으로 구성돼요:
  • 변형 A - 현재 라이브 장바구니 (자동으로 선택되며 변경할 수 없음)
  • 변형 B - 선택한 초안 장바구니 하나
  • 트래픽 할당 - 두 변형 간의 구성 가능한 분배 비율 (각 1-99%, 합계가 100%여야 함)
  • 테스트 이름 - 최대 255자, “Free Shipping Bar - March Test”처럼 설명적인 이름을 사용하세요
테스트가 게시되면 들어오는 쇼핑객은 두 변형 중 하나로 라우팅돼요. 각 변형은 자체 노출 수, 전환, 수익 데이터를 수집해요. 준비가 되면 승자를 선언하고, 해당 변형이 새로운 라이브 장바구니가 돼요.

테스트 설정하기

  1. Upcart > Carts로 이동하세요
  2. 라이브 장바구니초안 장바구니가 각각 최소 하나씩 있는지 확인하세요. Create test 버튼은 항상 페이지에 있지만, 둘 다 존재할 때까지 비활성화 상태로 유지돼요. 어느 것이 없는지에 대한 힌트는 표시되지 않으니 장바구니 목록을 확인하세요. 테스트가 이미 실행 중일 때는 버튼이 End test로 바뀌는데, 그때 사용할 수 있는 유일한 테스트 작업이 승자 선언이기 때문이에요.
  3. Create test를 클릭하세요
  4. 테스트 이름을 입력하세요
  5. 라이브 장바구니와 비교 테스트할 초안 장바구니를 선택하세요
  6. 트래픽 할당을 설정하세요 (기본값은 50/50)
  7. Publish & start test를 클릭하세요
테스트가 라이브 상태가 되면 트래픽 할당과 장바구니 설정이 잠겨요. 변경이 필요하면 현재 테스트를 종료하고 새 테스트를 시작하세요.

테스트 분석 보기

테스트가 실행되면 Analytics 탭에서 변형별 분석을 확인할 수 있어요. 각 변형에 대해 보고되는 네 가지 KPI는 다음과 같아요:
분석은 일별 작업으로 집계돼요. 테스트를 막 시작하셨다면 처음 약 24시간 동안 숫자 대신 대시(-)가 표시돼요. 이는 정상적인 동작이며 버그가 아니에요. 테스트 시작 후 24시간 이내에 숫자가 나타나요.
Analytics 탭의 진행 막대는 통계적 유의성을 위해 권장되는 노출 수에 얼마나 근접했는지 보여줘요. 이 기준에 도달하면 자신 있게 승자를 선언할 수 있는 충분한 데이터가 확보된 거예요.

테스트 종료 및 승자 선언

  1. Upcart > Carts로 이동해 End Test를 클릭하세요
  2. 승리한 변형을 선택하세요
  3. Confirm을 클릭하세요
승리한 변형이 트래픽 100%로 새로운 라이브 장바구니로 게시돼요. 패배한 변형은 초안으로 남아요.
승자 선언은 되돌릴 수 없어요. 잘못된 변형을 선택하셨다면 초안에서 이전 장바구니를 수동으로 다시 게시하셔야 해요.

자주 묻는 질문

아니요. 스토어당 한 번에 하나의 활성 테스트만 허용돼요. 새 테스트를 시작하기 전에 현재 테스트를 종료해야 해요.
아니요. A/B 테스트는 항상 라이브 장바구니를 하나의 초안 장바구니와 비교해요. 라이브 장바구니는 자동으로 선택되며 변경할 수 없어요.
아니요. A/B 테스트는 정확히 두 개의 변형을 지원해요. 다변량 테스트는 현재 Upcart에서 지원되지 않아요.
아니요. 테스트가 게시되면 트래픽 할당이 잠겨요. 변경하려면 현재 테스트를 종료하고 원하는 분배 비율로 새 테스트를 시작하세요.
아니요. 테스트가 라이브 상태인 동안에는 테스트 구성과 장바구니 에디터 설정이 모두 잠겨요. 변경하려면 테스트를 종료하세요.
분석은 일별 작업으로 집계돼요. 새로 시작한 테스트는 첫 번째 집계 작업이 완료될 때까지 대시를 표시하며, 일반적으로 테스트 시작 후 24시간 이내에 완료돼요. 이는 정상적인 동작이며 버그가 아니에요.
아니요. 각 쇼핑객은 하나의 변형에 배정되며 세션이 바뀌어도 그 변형에 유지돼요 — 배정 정보가 브라우저의 로컬 스토리지에 저장되므로 페이지 로드, 새 탭, 며칠 후 재방문에도 유지돼요. 테스트의 장바구니가 변경되거나 테스트가 종료될 때만 다시 산출돼요.
아니요. 변형 배정은 장바구니가 표시될 때만 의미가 있어요. 장바구니를 한 번도 트리거하지 않은 쇼핑객은 노출 수에 집계되지 않아요.
네. 모든 금액은 합산되기 전에 스토어의 기본 통화로 읽히므로 추가 수익과 AOV는 이미 정규화되어 있어요 — 다중 통화 스토어의 수치도 변형 간에 직접 비교할 수 있어요.
아니요. Upcart는 변형별 지표와 통계적 유의성까지의 진행 막대를 보여주지만, 최종 결정은 여러분이 해요. 자동 승자 선택은 없어요.
아니요. 승자가 선언되면 해당 변형이 즉시 라이브 장바구니가 돼요. 되돌리려면 초안에서 이전 장바구니를 수동으로 다시 게시해야 해요.
패배한 변형은 초안 장바구니로 남아요. 삭제되지 않아요.
네. Analytics 탭에서 현재 라이브 테스트와 이전에 완료된 테스트를 나란히 볼 수 있어요.

도움이 필요하신가요? A/B 테스트 설정이나 실행에 대해 질문이 있으시면 앱 내 채팅을 통해 지원팀에 문의해 주세요.