実験の評価

必要最小限の数の訪問者がテストに参加するまでテストを実行した後は、十分な統計的信頼性を確保して、テストの結果を評価できます。

を使用 Insightして、仮説の一部として定義された指標や主要業績評価指標を比較し、テストが成功したかどうか(つまり、仮説が指定した信頼性で検証されたかどうか)を判断します。

この例のテストでは、訪問者コンバージョンが少なくとも1.5 %増加した場合、仮説が正しいことが証明されています。これは、前に定義した成功基準です。

次のワークスペースの例は、index2テストグループのコンバージョンが、実際にはコントロール母集団のコンバージョンよりも1.8%高かったことを示しています。これは仮説を証明したものです。

実験結果の要約

を使用 Insightすると、詳細なレポートを作成して、テストの結果を要約し、説明することができます。

次の例に示すように、レポートを使用して、結果に基づいてレコメンデーションを行い、レポートに指定した視覚情報によってバックアップします。

結果に基づく行動の実施

結果が明確になったら、テスト対象のページに実稼働レベルの変更を加え、Webサイトの他の領域にも同じ変更を適用し、テスト、結果および変更を完全にドキュメントすることで、それらの結果に基づいて対処する準備が整います。

アクションの監視

対照実験が完了し、適切な変更を実装したら、検証指標の表示、制御グラフの作成、ダッシュボード指標の提供などによる変更の監視を継続します。

テストおよび行った変更が元の結果に影響しないと考えられる場合は、必ず仮説を再テストする準備をしてください。

このページ