1. Učit se
    2. /
  2. Kurzy
    3. /
  3. A/B testování v Pythonu
Connected

cvičení

Opravené p-hodnoty

Představ si, že pracuješ jako datový vědec ve společnosti nabízející předplatné. Tým webových designérů hledá ideální CTA (call-to-action) tlačítko, které přiměje návštěvníky stránky k registraci jejich služby. Předložili ti 4 různé návrhy vedle stávající verze.

Po spuštění experimentu, který porovnával každou variantu s kontrolní skupinou, jsi získal seznam p-hodnot uložených v proměnné pvals. Přímé porovnání těchto hodnot s prahem významnosti by vedlo k nadhodnocené míře chyb typu I. Aby ses tomu vyhnul, můžeš použít funkci smt.multipletests() z knihovny statsmodels k opravě p-hodnot a testování statistické významnosti s FWER = 5 %.

Instrukce 1/2

undefined XP
  • 1
    • Proveď Bonferroniho korekci seznamu p-hodnot s použitím alpha = 0,05.
  • 2
    • Proveď Šidákovu korekci seznamu p-hodnot s použitím alpha = 0,05.