Statistik: Grundlagen

Splitwave wertet Experimente on-read aus: Die Kennzahlen werden bei jedem Aufruf der Ergebnis-Seite aus den gesammelten Ereignissen berechnet.

Was gezählt wird

• Exposure: Ein Besucher hat eine Variante gesehen. Gezählt wird über eindeutige Besucher (distinct).
• Conversion: Ein Besucher hat ein Goal erreicht.

Aus beiden ergibt sich die Conversion-Rate je Variante.

Zwei Methoden

Splitwave bietet zwei Auswertungen, pro Projekt wählbar:

• Frequentistisch – Zwei-Proportionen-z-Test mit p-Wert und Konfidenz.
• Bayessch – Wahrscheinlichkeit, die Control zu schlagen.

Defensiv ausgelegt

Bei zu wenig Daten meldet Splitwave bewusst „nicht signifikant" statt einer Scheinaussage. Division durch Null wird abgefangen.

Schwellen

Ein Gewinner wird erst ausgerufen, wenn die konfigurierten Schwellen erreicht sind – siehe Signifikanz & Laufzeit.