推奨される分割テストプロセス

日本語翻訳に関する免責事項

このページの翻訳はAIによって自動的に行われました。可能な限り正確な翻訳を心掛けていますが、原文と異なる表現や解釈が含まれる場合があります。正確で公式な情報については、必ず英語の原文をご参照ください。

Sitecore Searchにおいて、スプリットテストとは、ウィジェットの2つ以上のバリエーションを互いにテストする実験を指します。スプリットテストの構造化されたプロセスは、明確さ、自信、洞察をもたらします。

Searchで分割テストを実行するには、以下の手順を強く推奨します。

以下のセクションでは、推奨されるスプリットテストプロセスの各ステップを詳しく説明します。

まずは検定仮説から始めます

理想的には、検定仮説の定義が実験を行う最初のステップです。強い仮説は、結果の統計的有意性を解釈することと同じくらい重要です。

仮説を作成するには、まず以下の質問に答えることから始めることができます。

まずは分析から始めて、パフォーマンスの低いページやコンバージョンファネルを特定することができます。これにより、仮説を立てる要素にたどり着くことができます。実験を行って得られた結果が仮説を証明するわけではないことを認識しておく必要があります。

ウィジェットバリエーションの場合、仮説の変数はコンテキストルール、設定、またはコンテンツ戦略のいずれかです。変数を修正、追加、削除すると、ウィジェットバリエーションは異なる予測結果を生み出します。

結果を分析しやすくするために、分割検定では単一の変数を絞り、多変量検定では複数の変数を選んでみてください。検定に含まれる変数が多いほど、新しいKPIと単一の変更を関連付けるのが難しくなります。

以下は典型的な変数です:

仮説の場合の結果が予測される結果です。これはホームページのコンバージョンの増加、特定のキーワードの検索結果へのクリック数の増加、ダウンロード数の増加、クリック率、その他のKPIや指標などです。

予測結果は、利用可能なデータと現在のパフォーマンスデータに基づいて行いましょう。結果を比較するさまざまな指標の基準を必ず確立してください。また、変数の変化が段階的な効果をもたらすと予想されるか、大規模な効果をもたらすかも注意してください。

例えば、低い直帰率でより高いコンバージョンをテストします。テスト前に、予測されるコンバージョン率の増加を踏まえてどの程度の減少または増加が許容されるかを判断しなければなりません。

テスト仮説を定義し、分割テストを作成する前に、テストシナリオを反映したウィジェットのバリエーション(ベースラインおよび変更されたケース)を追加しなければなりません。

分割テストは各テストシナリオのトラフィックを分割し、そのパフォーマンスデータを収集します。

Searchでは、テストが終了すると、ウィジェットのデフォルトのバリエーションは別のバリエーションが予定されない限りActive状態に戻ります。

!注Searchは分割テストの結果を分析せず、ビジネスユーザーとして結果を分析するのはあなた次第です。希望するKPIに基づいて、勝利バリエーションをウィジェットのデフォルトバリエーションとして設定してください。

分割テストを作成する具体的な手順については、「ブースティング戦略のテスト」を参照してください。

この記事を改善するための提案がある場合は、お知らせください!