1. Learn
  2. /
  3. Courses
  4. /
  5. A/B testování v Pythonu

Connected

Exercise

Delta metoda

Delta metoda patří k nejpraktičtějším aplikacím A/B testování. Jako datový vědec se budeš setkávat se situacemi, kdy je přiřazení uživatelů k variantám založeno na user_id (aby byl zajištěn konzistentní zážitek), zatímco jednotkou analýzy je něco granulárněji — například zobrazení stránky nebo session.

V tomto cvičení budeš analyzovat rozdíl v metrice celkové hodnoty order_value na page_view mezi variantami A a C. Máš k dispozici DataFrame checkout spolu s knihovnami pandas, numpy a předpřipravenými funkcemi pro odhad rozptylu metriky podílu var_delta() a z-test pro metriku podílu ztest_delta().

Instructions 1/3

undefined XP
    1
    2
    3
  • Definuj složky metriky podílu na úrovni uživatele pro každou z variant A a C — jako čitatel použij celkovou hodnotu order_value na user_id (sloupec order_value), jako jmenovatel pak počet user_id (sloupec page_view).