Delta ou não?
Ao analisar métricas de razão, às vezes a unidade analisada na métrica de interesse é mais granular do que a unidade de randomização. Por exemplo, podemos randomizar por user_id e tentar avaliar o impacto das mudanças em métricas por sessão ou por visualização de página. Isso viola algumas das suposições em torno do cálculo da variância que usamos em testes de significância. O método Delta pode ajudar a lidar com essa discrepância.
Este exercício faz parte do curso
A/B Testing em Python
Exercício interativo prático
Transforme a teoria em ação com um de nossos exercícios interativos
Começar o exercício