Skip to main content

체크아웃 A/B 테스트

A/B 테스트(스플릿 테스트라고도 함)를 사용하면 체크아웃 위젯의 두 가지 버전을 비교하여 어느 쪽이 더 나은 성과를 내는지 확인할 수 있어요. A/B 테스트는 현재 standalone 위젯에서만 사용할 수 있으며 페이지에서는 아직 지원되지 않아요. 각 버전은 체크아웃 트래픽의 일부에게 표시되고 성과가 별도로 추적되므로 더 높은 성과를 내는 버전을 파악할 수 있어요. 오퍼의 다양한 변형을 테스트하면 전환율을 개선하고 수익을 늘리며 업셀 전략에 대해 데이터 기반의 의사 결정을 내릴 수 있어요.
이 페이지는 체크아웃 위젯의 A/B 테스트만 다뤄요. 구매 후 오퍼를 테스트하려면 구매 후 오퍼 A/B 테스트를 참조하세요.
체크아웃 위젯은 Shopify의 Checkout Extensibility API 제한으로 인해 Shopify Plus 판매자만 사용할 수 있어요.

체크아웃 A/B 테스트 작동 방식

Standalone 체크아웃 위젯은 단일 블록 내에서 두 가지 버전을 지원해요. 두 버전이 모두 활성화되면 트래픽이 50/50으로 분할되며, 분석 화면에서 Version AVersion B로 표시돼요. 각 버전은 서로 다른 고객 집단에게 표시되고 성과가 독립적으로 추적되므로 결과를 비교하여 우승 버전을 파악할 수 있어요. 각 버전에는 고유한 구성과 설정이 있어 오퍼 간의 의미 있는 차이를 테스트할 수 있어요.
A/B 테스트는 현재 standalone 위젯에서만 사용할 수 있어요. 페이지는 아직 A/B 테스트를 지원하지 않아요.

테스트할 수 있는 항목

A/B 테스트는 업셀 위젯콘텐츠 위젯 모두에서 지원돼요. 업셀 위젯 - 다음을 테스트할 수 있어요:
  • 제품: 서로 다른 제품, 제품 유형 또는 추천 전략(특정 제품 vs. AI 추천 vs. 가장 비싼 제품)
  • 할인: 서로 다른 할인 금액 또는 유형(퍼센트 vs. 고정 금액)
  • 위젯 모드: 단일 제품 업셀, 다중 제품 업셀 또는 체크마크 업셀
  • Blank (Skip): 빈 버전을 대조군으로 사용하여 업셀 표시가 체크아웃 전환에 도움이 되는지 해가 되는지 측정
콘텐츠 위젯(신뢰 배지, 후기, 장바구니 컨트롤, 메모, 텍스트, 이미지, 리워드 바) - 다음을 테스트할 수 있어요:
  • 서로 다른 배지 또는 후기 콘텐츠
  • 서로 다른 메시지 또는 문구
  • 콘텐츠 위젯 표시 vs. 미표시(Blank/Skip을 대조군으로 사용)

테스트 유형

Standalone 위젯에 새 버전을 추가할 때 세 가지 테스트 유형 중 하나를 선택해요:

Duplicate content

Duplicate content는 기존 버전의 사본으로 새 버전을 생성해요. 다른 할인 금액이나 다른 제품처럼 작은 변경 사항을 테스트하면서 나머지는 모두 동일하게 유지하고 싶을 때 사용하세요. 시작점이 동일하기 때문에 성과 차이가 발생하면 여러분이 변경한 그 한 가지가 원인일 가능성이 높아요. 변수를 최소화하고 결과 해석을 쉽게 해주기 때문에 A/B 테스트에서 가장 일반적인 시작점이에요.

New content

New content는 처음부터 구성하는 빈 버전을 생성해요. 다른 위젯 모드, 완전히 다른 제품 카테고리 또는 다른 트리거 전략처럼 근본적으로 다른 오퍼를 테스트하고 싶을 때 사용하세요. New content 버전은 완전한 유연성을 제공하지만 설정 시간이 더 필요해요. 이 유형은 단일한 점진적 변경보다 서로 다른 두 가지 접근 방식을 비교하고 싶은 넓은 범위의 테스트에 가장 적합해요.

Blank (Skip)

Blank (Skip)은 할당된 고객에게 아무것도 표시하지 않는 빈 버전을 생성해요. 위젯이 전혀 표시되지 않을 때 어떤 일이 일어나는지, 즉 기준선을 측정하는 대조군으로 사용하세요. Blank 버전을 활성 오퍼와 비교하면 위젯이 체크아웃 전환에 도움이 되는지 해가 되는지 이해할 수 있어요. 특정 고객 세그먼트에서 위젯 표시가 체크아웃 이탈을 늘릴까 봐 걱정된다면 특히 유용해요.

체크아웃 A/B 테스트 설정하기

1단계: standalone 위젯 열기 또는 생성하기

  1. Shopify Admin에서 Aftersell 앱을 여세요
  2. 왼쪽 사이드바에서 Checkout으로 이동하세요
  3. Standalone widgets 섹션까지 스크롤하세요
  4. 연필(편집) 아이콘을 클릭하여 기존 standalone 위젯을 열거나, Create widget을 클릭하여 새로 만드세요

2단계: 버전 추가하기

  1. 위젯 편집기 안에서 새 버전을 추가하세요
  2. 세 가지 테스트 유형 중 하나를 선택하세요: Duplicate content, New content 또는 Blank (Skip)
  3. 새 버전을 구성하세요 - 테스트하려는 제품, 할인, 위젯 모드 및 기타 설정을 지정하세요

3단계: 트리거 확인하기

트리거는 개별 버전이 아니라 위젯에 속해요 — Select triggers 카드는 버전 탭 위에 있으며, Version A와 Version B 모두 동일한 조건에서 제공돼요. 버전별로 구성할 항목은 없으며, 타겟팅 자체는 A/B 테스트할 수 없어요. 사용 가능한 트리거 옵션의 전체 목록은 체크아웃 트리거를 참조하세요.

4단계: Shopify Checkout 편집기에서 배치 확인하기

  1. Shopify Admin에서 Shopify Checkout 편집기를 여세요
  2. 이 standalone 위젯의 앱 블록이 원하는 위치에 배치되어 있는지 확인하세요
  3. 배치되기 전까지는 위젯이 고객에게 표시되지 않아요
이제 A/B 테스트가 라이브 상태예요.

트래픽 분할 방식

체크아웃 A/B 테스트는 두 개의 활성 버전(Version A와 Version B) 사이에 50/50 분할을 사용해요. 트래픽은 버전 간에 자동으로 균등하게 분배되며 수동으로 조정할 수 없어요. 버전을 일시 중지하면 모든 트래픽이 남은 버전으로 이동해요. 유효한 A/B 테스트를 실행하려면 두 버전을 모두 실행 상태로 두세요.

테스트 관리하기

A/B 테스트가 실행되면 언제든지 위젯 편집기 내에서 관리할 수 있어요.

버전 일시 중지하기

Manage A/B test 메뉴를 열고 Pause version A 또는 Pause version B를 선택하세요. 일시 중지된 버전은 트래픽 수신을 멈추고 남은 버전이 모든 트래픽을 받아요. 50/50 분할로 돌아가려면 Reactivate split test를 선택하세요. 버전별 활성화 토글은 없어요 — 위젯 헤더의 Active 스위치가 두 버전을 포함한 위젯 전체를 제어해요.

버전 편집하기

버전을 열고 직접 변경하세요. 정확한 결과를 위해 테스트가 실행되는 동안에는 버전에 큰 변경을 가하지 마세요. 성과 차이의 원인을 해석하기 어려워질 수 있어요.

버전 삭제하기

버전을 삭제하면 위젯에서 영구적으로 제거돼요. 삭제된 버전과 해당 데이터는 복구할 수 없어요. 모든 트래픽은 남아 있는 활성 버전으로 이동해요.

우승 버전 선택하기

테스트를 종료하고 하나의 버전으로 확정할 준비가 되면:
  1. 분석 데이터를 기반으로 더 높은 성과를 내는 버전을 파악하세요
  2. 패배한 버전을 일시 중지하거나 삭제하세요
  3. 이제 우승 버전이 트래픽의 100%를 받게 돼요

A/B 테스트 결과 이해하기

A/B 테스트가 실행 중일 때 Checkout 대시보드에서 위젯 옆의 막대 차트 아이콘을 클릭하면 Version A와 Version B의 성과를 볼 수 있어요. 표시되는 지표는 위젯 유형에 따라 달라요 - 업셀 위젯과 콘텐츠 위젯은 서로 다른 지표를 표시해요. 모든 위젯 수준 지표, 버전별 분석 및 Analytics 탭 Checkout 그래프에 대한 자세한 내용은 체크아웃 분석을 참조하세요.

제한 사항

A/B 테스트는 동일한 위젯 유형 내에서만 가능해요

Aftersell의 A/B 테스트는 동일한 위젯 유형의 두 버전을 비교해요. 예를 들어 서로 다른 두 가지 신뢰 배지 구성을 서로 비교하거나 업셀 오퍼를 Blank (Skip)과 비교하여 테스트할 수 있어요. 서로 다른 위젯 유형 간에는 A/B 테스트를 할 수 없어요 - 예를 들어 동일한 A/B 테스트에서 신뢰 배지 위젯과 이미지 위젯을 비교할 수 없어요.

A/B 테스트는 페이지에서 사용할 수 없어요

A/B 테스트는 현재 standalone 위젯에서만 사용할 수 있어요. 페이지는 아직 A/B 테스트를 지원하지 않아요.

배치 테스트는 지원되지 않아요

서로 다른 위젯 배치는 A/B 테스트할 수 없어요(예: 업셀이 주문 요약에서 더 나은 성과를 내는지 결제 섹션 위에서 더 나은지 테스트). A/B 테스트는 고정된 배치의 단일 위젯 내 콘텐츠를 비교해요.

모범 사례

한 번에 하나의 요소만 테스트하세요

여러 요소를 한 번에 변경하면 어떤 변경이 결과를 이끌었는지 알기 어려워져요. 명확하고 실행 가능한 인사이트를 위해 테스트당 하나의 변수만 분리하세요. 좋은 예: 10% 할인 vs. 20% 할인 테스트(변수 하나만 변경) 피해야 할 예: 10% 할인 + 제품 A vs. 20% 할인 + 제품 B 테스트(변수 두 개를 동시에 변경)

Blank (Skip)을 대조군으로 사용하세요

Blank (Skip) 버전을 활성 위젯과 비교하여 실행하는 것은 가장 가치 있는 테스트 중 하나예요. 위젯을 표시하는 것 자체가 체크아웃 전환율에 도움이 되는지 해가 되는지 알려줘요. Blank 버전이 체크아웃 완료에서 더 나은 성과를 낸다면 오퍼 자체를 재검토하거나 타겟팅을 조정할 필요가 있을 수 있어요.

체크아웃 이탈을 모니터링하세요

업셀 전환율이 높아지는 것은 좋지만, 체크아웃 이탈 증가라는 대가를 치르고 있지 않은지 확인하세요. A/B 테스트를 실행하는 동안 Analytics > Checkout 탭에서 Checkout abandonment rate를 정기적으로 확인하세요. 콘텐츠 위젯의 경우 버전별 분석 화면에도 체크아웃 이탈률 지표가 포함되어 있어요.

일반적인 테스트 아이디어

업셀 위젯 테스트
  • 특정 제품 vs. AI 추천 vs. 가장 비싼 제품
  • 보완 제품 vs. 동일 제품(재구매)
  • 10% 할인 vs. 20% 할인
  • 퍼센트 할인 vs. 고정 금액
  • 할인 vs. 할인 없음
  • 단일 제품 업셀 vs. 체크마크 업셀
  • 다중 제품 업셀 vs. 단일 제품 업셀
  • 활성 오퍼 vs. Blank (Skip)으로 업셀 표시의 순 효과 측정
콘텐츠 위젯 테스트
  • 특정 배지가 있는 신뢰 배지 vs. 없는 신뢰 배지
  • 서로 다른 후기 콘텐츠
  • 서로 다른 메모 또는 텍스트 메시지
  • 활성 콘텐츠 vs. Blank (Skip)으로 콘텐츠 위젯 표시의 효과 측정

자주 묻는 질문

A/B 테스트는 통계적 유의성에 도달하면 자동으로 중지되나요?

아니요. 체크아웃 A/B 테스트는 직접 종료할 때까지 계속 실행돼요 — 결과가 통계적 유의성에 도달해도 자동으로 중지되지 않아요. 분석에서 각 버전의 성과를 검토하고, 우승 버전에 확신이 들면 패배한 버전을 비활성화하거나 삭제하여 수동으로 테스트를 종료하세요(우승 버전 선택하기 참조). Aftersell은 절대 테스트를 대신 중지하거나 우승 버전을 대신 선택하지 않아요.

도움이 필요하신가요?

체크아웃 A/B 테스트 설정이나 분석에 관해 질문이 있으시면 앱 오른쪽 하단의 라이브 채팅으로 지원팀과 상담하세요.