Skip to main content
Een cart test is een A/B-test tussen twee complete winkelwagens. Je test je live winkelwagen tegen één uitdager, verdeelt het verkeer ertussen en kiest de winnaar wanneer je klaar bent.

​
Wat je test

De eenheid van een test is een complete winkelwagen — een hele ervaring, niet één block of instelling. Je vergelijkt twee van je opgeslagen winkelwagens in hun geheel. Elke concept-winkelwagen kan de uitdager zijn.

​
Een test aanmaken

Kies op de Carts-pagina Create test. Je hebt een live winkelwagen nodig en in totaal minstens twee winkelwagens. Vervolgens:
  1. Je live winkelwagen is automatisch de controle — die kun je niet wijzigen.
  2. Kies één uitdager uit je andere winkelwagens.
  3. Stel de traffic allocation in — de verdeling tussen de twee, standaard 50/50. Elke kant zit tussen 1% en 99%, en de twee moeten samen 100% zijn.
  4. Geef de test een naam (verplicht).
  5. Publish & start test.
Er kan slechts één test per winkel tegelijk lopen.

​
Terwijl een test loopt

  • Shoppers worden sticky ingedeeld in één variant, dus een terugkerende shopper blijft dezelfde winkelwagen zien voor de duur van de test.
  • Publiceren en depubliceren zijn vergrendeld, en de variantwinkelwagens zijn read-only in de editor — beëindig de test om wijzigingen te maken.

​
De significantie-indicator

Terwijl een test loopt, toont Aftersell een significantie-voortgangsbalk: de tot nu toe verzamelde impressies tegenover een beoogde steekproefgrootte. Het doel is een totaal over de hele test, zo bemeten dat de kleinste variant nog steeds ongeveer 3.500 impressies verzamelt — grofweg 7.000 in totaal voor een 50/50-verdeling, en proportioneel meer bij een ongelijke verdeling (een 80/20-verdeling heeft er ongeveer 17.600 nodig). Naarmate de test loopt, stapelen de impressies zich op en vult de balk zich richting dat doel. De balk verschijnt alleen terwijl een test live is. Zodra je de test beëindigt, verdwijnt de balk; de banner blijft de start- en einddatum van de test tonen, en je leest de uitkomst af uit de resultaten per variant.
De balk is een gereedheidsindicator — hij vertelt je of je genoeg verkeer hebt verzameld om een zelfverzekerde beslissing te nemen. Het is geen statistische p-waarde, en Aftersell roept niet automatisch een winnaar uit. Laat de test genoeg data verzamelen, vergelijk dan de varianten en kies.

​
Een test beëindigen en een winnaar kiezen

Wanneer je een test beëindigt, zie je van elke variant de Revenue, conversion rate (CCR) en impressies naast elkaar, en kies je zelf de winnaar. De winnaar wordt live gepubliceerd en de andere winkelwagen keert terug naar concept.
Het Revenue-cijfer bij het beëindigen van de test is breder dan dat op de Test analytics-pagina. Hier is het elke conversie toegeschreven aan de winkelwagen. Op Test analytics is de Added revenue-metric versmald tot upsell-, add-on- en abonnementsomzet. Verwacht dat de twee getallen verschillen voor dezelfde test, en vergelijk varianten binnen één weergave in plaats van ertussen.

​
Wat wel en niet getest kan worden

  • Wel: elke twee complete winkelwagenconfiguraties. Wissel lay-outs, blocks, teksten, design — bouw een uitdager-winkelwagen zoals je wilt en test hem tegen de live winkelwagen.
  • Een kanttekening bij metrics: de Added revenue-metric op Test analytics dekt upsell-, add-on- en abonnementsomzet — een subset van alles wat een winkelwagen verdient in plaats van een volledige verdeling. Beschouw het als een gelijkwaardige vergelijking tussen de twee varianten in plaats van als de totale bijdrage van elke variant. Het end-test-scherm gebruikt het bredere cijfer dat hierboven is beschreven.
Zie Test analytics voor hoe je de resultaten leest.