Skip to main content
カートテストは、2 つのカート全体の間で行う A/B テストです。公開中のカートを 1 つのチャレンジャーと比較し、トラフィックを両者に分割して、終了時に勝者を選びます。

​
テストの対象

テストの単位は完全なカート、つまり単一のブロックや設定ではなく体験全体です。保存済みのカート 2 つを丸ごと比較します。どのドラフトカートもチャレンジャーになれます。

​
テストの作成

Carts ページから Create test を選択します。公開中のカート 1 つと、合計で少なくとも 2 つのカートが必要です。その後:
  1. 公開中のカートが自動的にコントロールになります。これは変更できません。
  2. 他のカートからチャレンジャーを 1 つ選びます。
  3. トラフィック配分を設定します。両者の分割比率で、デフォルトは 50/50 です。それぞれ 1% から 99% の範囲で、合計が 100% になる必要があります。
  4. テストに名前を付けます(必須)。
  5. Publish & start test を実行します。
ストアごとに同時に実行できるテストは 1 つだけです。

​
テスト実行中

  • 購入者はいずれかのバリアントに固定的に振り分けられるため、再訪した購入者にはテスト期間中ずっと同じカートが表示されます。
  • 公開と非公開の操作はロックされ、エディター上でバリアントのカートは読み取り専用になります。変更するにはテストを終了してください。

​
有意性インジケーター

テストの実行中、Aftersell は有意性のプログレスバーを表示します。これは、目標サンプルサイズに対してこれまでに収集したインプレッション数を示すものです。目標はテスト全体の合計で、最小のバリアントでも約 3,500 インプレッションが集まるように設定されます。50/50 の分割ではおおよそ合計 7,000、偏った分割では比例して多くなります(80/20 の分割では約 17,600 必要)。テストが進むにつれてインプレッションが蓄積し、バーが目標に向かって満ちていきます。 バーはテストが実行中の間だけ表示されます。テストを終了するとバーは消え、バナーにはテストの開始日と終了日が表示され続け、結果はバリアントごとの数値から読み取ります。
このバーは準備状況のインジケーターです。自信を持って判断できるだけのトラフィックが集まったかどうかを示します。統計的な p 値ではなく、Aftersell が勝者を自動宣言することもありません。テストに十分なデータを集めさせてから、バリアントを比較して選んでください。

​
テストの終了と勝者の選択

テストを終了すると、各バリアントの Revenue、コンバージョン率(CCR)、インプレッションが並べて表示され、自分で勝者を選びます。勝者が公開され、もう一方のカートはドラフトに戻ります。
テスト終了画面の Revenue の数値は、Test analytics ページのものより広い範囲をカバーします。 ここではカートに帰属するすべてのコンバージョンが含まれます。テストアナリティクスの Added revenue 指標は、upsell、アドオン、サブスクリプションの収益に絞られています。同じテストでも 2 つの数値は異なるものと考え、バリアントの比較は同じ画面内で行い、画面をまたいで比較しないでください。

​
テストできるもの、できないもの

  • できる: 任意の 2 つのカート構成全体。レイアウト、ブロック、コピー、デザインを入れ替えて、好きなようにチャレンジャーカートを作り、公開中のカートと比較できます。
  • 指標に関する注意: Test analytics の Added revenue 指標は upsell、アドオン、サブスクリプションの収益をカバーします。これはカートが生むすべての収益の一部であり、完全な区分ではありません。各バリアントの総貢献としてではなく、2 つのバリアント間の同条件での比較として扱ってください。テスト終了画面では、上述のより広い数値が使われます。
結果の読み方についてはテストアナリティクスを参照してください。