Skip to main content
Um teste de carrinho é um teste A/B entre dois carrinhos inteiros. Você testa seu carrinho ao vivo contra um desafiante, divide o tráfego entre eles e escolhe o vencedor quando terminar.

​
O que você está testando

A unidade de um teste é um carrinho completo — uma experiência inteira, não um único bloco ou configuração. Você compara dois dos seus carrinhos salvos por inteiro. Qualquer carrinho em rascunho pode ser o desafiante.

​
Criando um teste

Na página Carts, escolha Create test. Você vai precisar de um carrinho ao vivo e de pelo menos dois carrinhos no total. Então:
  1. Seu carrinho ao vivo é o controle automaticamente — você não pode mudá-lo.
  2. Escolha um desafiante entre seus outros carrinhos.
  3. Defina a alocação de tráfego — a divisão entre os dois, com padrão de 50/50. Cada lado fica entre 1% e 99%, e os dois devem somar 100%.
  4. Dê um nome ao teste (obrigatório).
  5. Publish & start test.
Apenas um teste pode rodar por loja por vez.

​
Enquanto um teste roda

  • Os compradores são alocados de forma fixa em uma variante, então um comprador que retorna continua vendo o mesmo carrinho durante o teste.
  • Publicar e despublicar ficam bloqueados, e os carrinhos variantes ficam somente leitura no editor — encerre o teste para fazer alterações.

​
O indicador de significância

Enquanto um teste roda, a Aftersell mostra uma barra de progresso de significância: as impressões coletadas até agora contra um tamanho de amostra alvo. O alvo é um total do teste, dimensionado para que a menor variante ainda reúna cerca de 3.500 impressões — aproximadamente 7.000 no total para uma divisão 50/50, e proporcionalmente mais para uma desigual (uma divisão 80/20 precisa de cerca de 17.600). Conforme o teste roda, as impressões se acumulam e a barra se enche em direção a esse alvo. A barra aparece apenas enquanto um teste está ao vivo. Assim que você encerra o teste, a barra desaparece; o banner continua mostrando as datas de início e fim do teste, e você lê o resultado nos resultados por variante.
A barra é um indicador de prontidão — ela diz se você reuniu tráfego suficiente para tomar uma decisão confiante. Ela não é um p-valor estatístico, e a Aftersell não declara um vencedor automaticamente. Deixe o teste reunir dados suficientes, depois compare as variantes e escolha.

​
Encerrando um teste e escolhendo um vencedor

Quando você encerra um teste, vê o Revenue, a taxa de conversão (CCR) e as impressões de cada variante lado a lado, e você escolhe o vencedor por conta própria. O vencedor é publicado ao vivo e o outro carrinho volta a rascunho.
O valor de Revenue na tela de encerramento é mais amplo que o da página de Test analytics. Aqui ele é toda conversão atribuída ao carrinho. Em Test analytics, a métrica Added revenue é restrita a receita de upsell, complemento e assinatura. Espere que os dois números sejam diferentes para o mesmo teste, e compare variantes dentro de uma mesma superfície em vez de entre elas.

​
O que pode e não pode ser testado

  • Pode: quaisquer duas configurações completas de carrinho. Troque layouts, blocos, textos, design — construa um carrinho desafiante como quiser e teste-o contra o que está ao vivo.
  • Uma ressalva sobre métricas: a métrica Added revenue em Test analytics cobre receita de upsell, complemento e assinatura — um subconjunto de tudo que um carrinho rende, e não uma partição completa. Trate-a como uma leitura comparável entre as duas variantes, e não como a contribuição total de cada variante. A tela de encerramento usa o valor mais amplo descrito acima.
Veja Test analytics para saber como ler os resultados.