.avif)
Statistische Leistung
.webp)
Statistische Leistung (Statistical Power): Wahrscheinlichkeit, dass ein Test einen tatsächlichen Effekt aufdeckt, wenn dieser Effekt tatsächlich existiert. Im Zusammenhang mit CRO undA/B-Testing bedeutet eine hohe Power (in der Regel auf 80 % oder mehr festgelegt), dass der Test mit hoher Wahrscheinlichkeit eine leistungsstarke Variation korrekt identifiziert und somit das Risiko falsch negativer Ergebnisse (das Nicht-Erkennen eines tatsächlichen Effekts) verringert.
Die Power hängt hauptsächlich von drei Faktoren ab: der Stichprobengröße, dem Konfidenzniveau (z. B. 95 %) und dem Minimum Detectable Effect (MDE). Ein Test mit einer niedrigen Power kann wichtige Optimierungsmöglichkeiten verpassen, indem er fälschlicherweise zu dem Schluss kommt, dass eine Variation keine Auswirkungen hat. Aus diesem Grund ist die Berechnung der Potenz ein entscheidender Schritt bei der Vorbereitung eines jeden A/B-Tests, um zuverlässige und verwertbare Entscheidungen für die Optimierung zu gewährleisten.
Ähnliche Definitionen
MDE (Minimum Detectable Effect)
Der kleinste Unterschied, der, wenn er vorhanden ist, in einem statistischen Test zuverlässig festgestellt werden kann.
Falsche Positive
Ergebnisse, die fälschlicherweise angeben, dass ein Effekt vorhanden ist, obwohl dies nicht der Fall ist.
Uplift
Die Steigerung der Konversionen oder des durch eine bestimmte Aktion erzeugten Werts, die oft in A/B-Tests gemessen wird.
Mann-Whitney U Test
Ein nichtparametrischer Test, der verwendet wird, um zwei unabhängige Stichproben zu vergleichen, um festzustellen, ob sie aus der gleichen Verteilung stammen.
Statistisches Vertrauen
Grad der Gewissheit, den man bei den Ergebnissen eines statistischen Tests hat.
p-Wert
Ein statistisches Maß, das die Wahrscheinlichkeit angibt, dass die gesammelten Daten (oder etwas Extremeres) unter der Nullhypothese beobachtet werden.
Frequentist
Ein statistischer Ansatz, der die Parameter des Modells ausschließlich auf der Grundlage der beobachteten Daten schätzt und keine A-priori-Informationen verwendet.
.svg){kind=small}
