Rysowanie krzywych mocy
Przeprowadzenie analizy mocy przed uruchomieniem testu A/B to jeden z najważniejszych kroków. Pozwala zwiększyć szanse na uzyskanie rozstrzygających wyników oraz lepiej zaplanować zasoby i czas potrzebny dla każdego testu. Co więcej, rysowanie krzywych mocy ułatwia wizualizację wpływu zmiany poszczególnych parametrów na wymaganą wielkość próby potrzebną do osiągnięcia pożądanego poziomu ufności. Choć większa próba zwiększa szanse na uzyskanie rozstrzygającego wyniku, zbieranie dodatkowych obserwacji lub przedłużanie testu staje się marnotrawstwem zasobów, gdy krzywe mocy osiągają nasycenie.
Sprawdźmy, jak to działa w praktyce.
To ćwiczenie jest częścią kursu
Testy A/B w Pythonie
Interaktywne ćwiczenie praktyczne
Spróbuj tego ćwiczenia, uzupełniając ten przykładowy kod.
from statsmodels.stats.power import TTestIndPower
# Specify parameters for power analysis
sample_sizes = ____(range(____))
effect_sizes = ____([____])