Skip to main content
A/B テストでは、実際のお客様のトラフィックを使用して、公開中のカートと下書きカートのバリアントを比較できます。Upcart は、選択した配分に基づいて流入トラフィックを 2 つのバリアント間で自動的に分割し、バリアントごとの分析を追跡し、準備ができたら勝者を決定できます。

​
仕組み

各 A/B テストは次の要素で構成されます：
  • バリアント A - 現在公開中のカート（自動的に選択され、変更できません）
  • バリアント B - 選択した下書きカート 1 つ
  • トラフィック配分 - 2 つのバリアント間の設定可能な分割（それぞれ 1〜99%、合計は 100% になる必要があります）
  • テスト名 - 最大 255 文字。「Free Shipping Bar - March Test」のようなわかりやすい名前を使用してください
テストが公開されると、流入するお客様は 2 つのバリアントのいずれかに振り分けられます。各バリアントは、それぞれのインプレッション、コンバージョン、収益データを収集します。準備ができたら勝者を決定し、そのバリアントが新しい公開中のカートになります。

​
テストのセットアップ

  1. Upcart > Carts に移動します
  2. 公開中のカートと下書きカートが少なくとも 1 つずつあることを確認します。Create test ボタンは常にページ上にありますが、両方が存在するまで無効のままです。どちらが不足しているかのヒントは表示されないため、カートの一覧を確認してください。テストの実行中は、勝者の決定が唯一可能なテスト操作となるため、ボタンは End test に置き換わります。
  3. Create test をクリックします
  4. テスト名を入力します
  5. 公開中のカートと比較したい下書きカートを選択します
  6. トラフィック配分を設定します（デフォルトは 50/50）
  7. Publish & start test をクリックします
テストが公開されると、トラフィック配分とカート設定はロックされます。変更が必要な場合は、現在のテストを終了して新しいテストを開始してください。

​
テスト分析の確認

テストの実行中は、Analytics タブでバリアントごとの分析を確認できます。各バリアントについて報告される 4 つの KPI は次のとおりです：
分析データは日次ジョブで集計されます。テストを開始したばかりの場合、最初の約 24 時間は数値の代わりにダッシュが表示されます。これは想定どおりの動作で、バグではありません。数値はテスト開始から 24 時間以内に表示されます。
Analytics タブのプログレスバーには、統計的有意性のために推奨されるインプレッション数にどれだけ近づいているかが表示されます。そのしきい値に達すれば、自信を持って勝者を決定するのに十分なデータが揃ったことになります。

​
テストの終了と勝者の決定

  1. Upcart > Carts に移動し、End Test をクリックします
  2. 勝者のバリアントを選択します
  3. Confirm をクリックします
勝者のバリアントが、トラフィック 100% の新しい公開中カートとして公開されます。敗者のバリアントは下書きとして残ります。
勝者の決定を取り消すことはできません。誤ったバリアントを選択した場合は、下書きから以前のカートを手動で再公開する必要があります。

​
よくある質問

いいえ。ストアごとに一度に許可される有効なテストは 1 つだけです。新しいテストを開始する前に、現在のテストを終了する必要があります。
いいえ。A/B テストは常に、公開中のカートと 1 つの下書きカートを比較します。公開中のカートは自動的に選択され、変更できません。
いいえ。A/B テストはちょうど 2 つのバリアントをサポートします。多変量テストは現在 Upcart ではサポートされていません。
いいえ。テストが公開されるとトラフィック配分はロックされます。変更するには、現在のテストを終了し、希望の分割で新しいテストを開始してください。
いいえ。テストの実行中は、テスト設定とカートエディタの設定の両方がロックされます。変更するにはテストを終了してください。
分析データは日次ジョブで集計されます。まったく新しいテストは、最初の集計処理が完了するまでダッシュを表示します。これは通常、テスト開始から 24 時間以内に行われます。これは想定どおりの動作で、バグではありません。
いいえ。各お客様は 1 つのバリアントに割り当てられ、セッションをまたいでもそのバリアントに留まります。割り当てはブラウザのローカルストレージに保存されるため、ページの再読み込み、新しいタブ、数日後の再訪でも維持されます。再割り当てが行われるのは、テストのカートが変更されるか、テストが終了した場合のみです。
いいえ。バリアントの割り当てが意味を持つのは、カートが表示されたときだけです。カートを一度もトリガーしないお客様はインプレッションにカウントされません。
はい。すべての金額は合計される前にストアのデフォルト通貨で読み取られるため、Added Revenue と AOV はすでに正規化されています。複数通貨ストアの数値も、バリアント間で直接比較できます。
いいえ。Upcart はバリアントごとの指標と統計的有意性に向けたプログレスバーを表示しますが、最終判断はあなたが行います。自動的な勝者選択はありません。
いいえ。勝者が決定されると、そのバリアントは直ちに公開中のカートになります。元に戻すには、下書きから以前のカートを手動で再公開する必要があります。
敗者のバリアントは下書きカートとして残ります。削除はされません。
はい。Analytics タブには、現在実行中のテストと過去に完了したテストの両方が並んで表示されます。
サポートが必要ですか？ A/B テストのセットアップや実行についてご質問がある場合は、アプリ内チャットからサポートチームにご連絡ください。