1. Učit se
    2. /
  2. Kurzy
    3. /
  3. A/B testování v Pythonu
Connected

cvičení

Vykreslování křivek výkonu

Provedení analýzy výkonu před spuštěním A/B testu patří k nejdůležitějším krokům celého procesu. Pomáhá zvýšit šanci na dosažení průkazných výsledků a lépe naplánovat zdroje i čas věnovaný každému testu. Vykreslování křivek výkonu navíc usnadňuje vizualizaci toho, jak změna různých parametrů ovlivňuje potřebnou velikost vzorku pro dosažení požadované úrovně spolehlivosti. Větší vzorek sice zvyšuje šanci na průkazný výsledek, ale jakmile se křivky výkonu saturují, sbírání dalších jednotek nebo prodlužování doby testu je zbytečné plýtvání zdroji.

Podívejme se, jak to funguje v praxi.

Pokyny 1/4

undefined XP
    1
    2
    3
    4
  • Vytvoř NumPy pole pro sample_sizes v rozsahu od 10 do 600 a effect_sizes s hodnotami 0,1, 0,2 a 0,3.