Delta oder nicht?

Wenn du Verhältnis-Metriken analysierst, ist die betrachtete Einheit in der interessierenden Metrik manchmal feiner als die Randomisierungseinheit. Zum Beispiel können wir nach user_id randomisieren und versuchen, die Auswirkungen unserer Änderungen auf Sitzungs- oder Seitenaufruf-Metriken zu untersuchen. Das verletzt einige Annahmen zur Varianzberechnung, die wir in Signifikanztests verwenden. Die Delta-Methode kann helfen, diese Diskrepanz zu berücksichtigen.