実験結果に基づいて自動テスト後アクションを設定します

自動化されたテスト後アクションを使えば、実験結果に基づいて 実験が統計的有意 性に達した後に何が起こるかを指定できます。勝者があるか結果が不確定かに応じて、すべてのトラフィックを勝者バリアントに誘導するか、コントロールバリアントに戻すか、実験を終了するかを選択できます。

!注テスト後の自動アクションを設定するには 、実験に少なくとも1つの目標を追加 する必要があります。

実験結果に基づいて自動テスト後のアクションを設定する方法:

1. 実験ビルダーで「 Post-test」 タイルをクリックします。

   デフォルトでは、新しい実験では勝者にすべてのトラフィックを割り当てるか、結果が決定的でない場合は実験を継続する設定が行われます。

2. テスト後のデフォルト操作を編集するには、「 テスト設定の終わりを編集」をクリックしてください。

3. テスト終了設定のペインで、実験が統計的有意性に達した後に結果に基づいて自動的に実行したいアクションを選択します。

   • もし勝つバリアントがあれば:
     • すべてのトラフィックを勝ち取ったバリアントに割り当て、すべてのゲストトラフィックを最もパフォーマンスの良いバリアントにリダイレクトします。
     • すべてのトラフィックをコントロールバリアントに割り当て、ゲストトラフィックをコントロールバリアントに戻すために使います。
     • テストを完了 して実験を終了し、すべてのバリアントへの交通割り当てを停止します。
   • 結果が決定的でない場合:
     • テストを続けて実験を続け、現在のトラフィック割り当てを維持してください。
     • すべてのトラフィックをコントロールバリアントに割り当て、ゲストトラフィックをコントロールバリアントに戻すために使います。
     • テストを完了 して実験を終了し、すべてのバリアントへの交通割り当てを停止します。

4. 「保存」をクリックします。

   !重要テスト後のアクションを保存し実験が稼働した後は、統計的有意性に達したかどうかにかかわらず 、主要な目標を更新することはできません。

   ただし、二次目標の追加や編集はいつでも可能ですが、これらの変更は実験の結果には影響しません。

   実験が統計的有意性に達すると、実験を開くビルド 概要 にバナーが表示されます。このバナーは実験結果を示し、テスト後のアクションが有効であることをタイムスタンプとともに知らせます。