エクスペリエンス最適化およびコンテンツテストFAQ

最適化ウィンドウでは、推奨テストとは何を意味し、メトリクスは何を測定しているのでしょうか?

「推奨テスト」ダイアログでは、最も価値を得るためにテストできるページが表示されます。

以下の指標は、1から10の正規化されたスコアを用いてページをテストするのが良いアイデアかどうかを判断します。

• 潜在能力 – どのページが訪問者のエンゲージメントを高める可能性が高いかを示すスコアです
• インパクト – テストの予想されるインパクトレベル
• 推薦 – 潜在能力と影響力の組み合わせ。これは、ページの最適化に対する推奨の強さを示します。

エクスペリエンス最適化は、テストが統計的に有意になるまでにどれくらいの期間続けるべきかをどのように計算するのでしょうか?

Sitecoreはテストの検証に必要な訪問者数を計算します。この数値は、テストする体験数とテストの予想される信頼度レベルに依存します。

テストを開始すると、統計的に有意な結果を得るために必要な訪問数を確認できます。ページに過去の訪問者データがある場合、有効な結果に到達するまでのテストが実行される予想日数が表示されます。

過去1か月の過去データを活用すれば、テストで重要な結果を得るために必要な訪問数を予測できます。ただし、ウェブサイトのトラフィックは時間とともに変動することがあり、これが予測の正確性に影響を与えることがあります。

この方法は、ある体験がオリジナルよりもはるかに良い成績を収めたことを検証し、必要な訪問者数に達した時点で勝者を宣言します。

もしテストが統計的に有意になるために必要な訪問者数が終了日までに達成された場合、テストは実行されますか?

はい、テストは引き続き実行されます。テストは推奨終了日まで実行させなければなりません。これにより、週の各日のデータが確保され、テスト結果に影響を与え、ウェブサイト上の活動の洞察を得ることができます。

もしテスト終了日が統計的に有意な結果を得られなければ、テストは停止されます。

Experience Optimizationがすでにテストの実行期間を提案しているのに、なぜテストの最小・最大時間を手動で設定する必要があるのでしょうか?

Experience Optimizationはテストの実行時間を予測しますが、設定ファイルでテストの時間枠を調整したい場合もあります。例えば、テスト対象ページのトラフィックに影響を与える大きな変更を行う場合に、これを行いたいことがあります。例えば、新しいキャンペーンを追加してページのトラフィックを増やす場合、テスト結果に影響を与えることがあります。

一般的に、テストの最大期間を指定するのがベストプラクティスです。なぜなら、一部の検索エンジンは無期限にテストされたコンテンツを検索結果に悪影響を与えようとする試みと解釈するからです。

なぜ多変量テスト、ページテスト、またはバージョンテストが失敗するのでしょうか?

未公開のバリエーションがあるページにアクセスするとテストが失敗することがあります。テストが失敗しないようにするには、テストに関わるバリアントを公開する必要があります。ページに関連付けられたワークフローがある場合は、ワークフローの状態も確認することをお勧めします。

テスト結果の概要指標について説明してもらえますか?

テスト結果の概要は、テストのパフォーマンスに関する情報を提供します。テストのパフォーマンスを把握できる3つの指標があります。それらは以下の通りです。

• エクスペリエンス効果 – テスト開始以降のエンゲージメント値の相対的な変化
• 信頼度 – 統計的信頼水準
• スコア – 効果と月間の訪問数の積

この例では、テストは85.9%の体験効果を持っています。これは、コンテンツによって生成されるエンゲージメント価値が元のものより85.9%増加したことを意味します。信頼度は56.88%で、結果が統計的に有意でなく、テストが未完成である可能性が高いことを示しています。

エクスペリエンスエディターの最適化タブで「アクティブテスト」を選択してテストのパフォーマンスを確認できます。効果がどのように計算されるのか説明してもらえますか?

効果は、テストされたコンテンツに触れた接触者のエンゲージメント値がどれだけ変化したかを示します。元のページのエンゲージメント値が最も高い場合は、テストに効果がなかったため効果スコアは0になります。

特定のデバイスでA/Bテストと多変量テストを実施できますか?

はい。A/Bテストとパーソナライズテストは常にデバイスごとに異なります。ただし、ページテストは関連するすべてのデバイスで実行されます。

1ページで複数のパーソナライズされたコンポーネントをテストできますか?

はい。

ワークフローなしでテストを始められますか?

はい、管理者がワークフロー なしでコンテンツテストを有効にするようにシステムを設定した場合は可能です。もし組織がコンテンツやテストの承認にワークフローを使っていない場合は、これを行うことをお勧めします。

エクスペリエンス最適化へのアクセスを提供するさまざまなセキュリティ役割はありますか?

はい。エクスペリエンス最適化には、さまざまな機能レベルにアクセスできるセキュリティの役割がいくつかあります。

• オーサリング – テストの作成、実行、編集を可能にします。

  通常、この役割はコンテンツ作成者やマーケターに割り当てられます。

• Analytics Advanced Testing – Authoringの役割と同じアクセスに加え、追加のタブやコントロール機能を備えています。

  この役割は通常、マーケティングアナリストに割り当てられます。

• Analytics Management Reporting – すべてのコンテンツテストダッシュボードおよび過去のレポートに完全アクセス権を持ち、テストを作成できません。

  この役割は通常、マーケティングディレクターに割り当てられます。

管理者は個別ユーザーにセキュリティロールを追加し、エクスペリエンス最適化へのアクセスも可能です。