統計的有意性を評価する

パーソナライズ版がコントロールより良い結果だったことがわかったので、次はその結果が統計的に有意かどうかを判断します。統計的有意性は、そのテスト結果がたまたま良かったのか、バリアント間の真の差を反映しているのかを理解するうえで重要です。これにより、マーケティングチームはこの機能をロールアウトするかどうかを納得感をもって判断できます。

control と personalization を入力として、stats.ttest_ind() を試してください。

コントロールとパーソナライズの差は統計的に有意ですか？

選択肢

はい。p = 0.510 なので統計的に有意です。

いいえ。p = 0.510 なので統計的に有意ではありません。

いいえ。p = 0.006 なので統計的に有意ではありません。

はい。p = 0.006 なので統計的に有意です。

演習

統計的有意性を評価する

指示

選択肢

.css-6su6fj{-webkit-flex-shrink:0;-ms-flex-negative:0;flex-shrink:0;}演習

指示

選択肢

演習