Delta ou não?
Ao analisar métricas de razão, às vezes a unidade analisada na métrica de interesse é mais granular do que a unidade de randomização. Por exemplo, podemos randomizar por user_id e tentar avaliar o impacto das mudanças em métricas por sessão ou por visualização de página. Isso viola algumas das suposições em torno do cálculo da variância que usamos em testes de significância. O método Delta pode ajudar a lidar com essa discrepância.
Este exercicio faz parte do curso
A/B Testing em Python
exercicio interativo prático
Transforme teoria em prática com um dos nossos exercicio interativos
Iniciar exercicio