AA Test

Eine Art von Test, bei dem zwei Gruppen exakt dieselbe Erfahrung (dieselbe Seite, derselbe Inhalt, dieselben Bedingungen) erhalten, mit dem Ziel, die Zuverlässigkeit des Testsystems zu überprüfen. Im Zusammenhang mit CRO (Conversion Rate Optimization) wird mit einem A/A-Test sichergestellt, dass :

• die Verteilung des Verkehrs auf die Varianten ist gut ausgewogen,
• das Conversion-Tracking ordnungsgemäß funktioniert,
• es keine technischen oder verhaltensbedingten Ver zerrungen im Testing-Tool gibt,
• die unter realen Bedingungen beobachteten Abweichungen zwischen Varianten nicht auf Zufall oder schlechte Parametrisierung zurückzuführen sind.

Diese Art von Test wird häufig vor dem Start eines kritischen A/B-Tests verwendet, insbesondere wenn :

• ein neues Testing-Tool installiert wurde (z. B. Dynamic Yield, AB Tasty, Optimizely),
• eine neue Logik der Segmentierung oder Zielgruppenansprache vorhanden ist,
• server-side-Variationen verwendet werden und validiert werden müssen.

💡 Gut zu wissen: Es ist normal, dass in einem A/A-Test kleine statistische Unterschiede auftreten, aber keiner sollte signifikant sein. Wenn eine Variante die andere mit einem hohen Konfidenzniveau übertrifft, kann dies auf eine Verzerrung in der Konfiguration, einen Tracking-Bug oder ein Problem mit der Randomisierung hindeuten.

‍