Delta sau nu?
Atunci când analizezi metrici de tip raport, uneori unitatea de analiză din metrica de interes este mai granulară decât unitatea de randomizare. De exemplu, putem randomiza după user_id și să încercăm să măsurăm impactul modificărilor noastre asupra metricilor per sesiune sau per vizualizare de pagină. Acest lucru încalcă unele dintre ipotezele din jurul calculului varianței, pe care o folosim în testele de semnificație. Metoda Delta poate ajuta la corectarea acestei discrepanțe.
Acest exercițiu face parte din cursul
A/B Testing în Python
Exercițiu interactiv practic
Transformă teoria în practică cu unul dintre exercițiile noastre interactive
Începe exercițiul