Ein Fehler 2. Art ist das Nicht-Erkennen eines tatsächlich vorhandenen statistischen Effekts, Zusammenhangs oder Unterschieds; formell besteht er darin, eine falsche Nullhypothese nicht zurückzuweisen (falsch negativ).

Prinzip

Der Fehler 2. Art wird durch die Teststärke (Power = 1 − Beta) bestimmt; die Reduktion des Fehlers 2. Art erfordert größere Stichproben, stärkere Effekte oder empfindlichere Versuchspläne, steht aber oft im Spannungsfeld zum Fehler 1. Art und zu Kostenfragen.

Demonstration

Wenn ein Unternehmen ein Experiment durchführt, um eine kleine Verbesserung der Conversion durch eine Webseitenanpassung zu erfassen, tritt ein Fehler 2. Art auf, wenn der Test nicht genug Power hat und keine Verbesserung feststellt, sodass eine umsatzsteigernde Änderung verworfen wird.

Fehlanwendung

Ein nicht signifikantes Ergebnis als Beleg für fehlenden Effekt zu interpretieren, ohne Power, Stichprobengröße oder Effektgröße zu berücksichtigen, ist eine häufige Fehlanwendung, die das Risiko des Fehlers 2. Art verschleiert.

Konsequenz

Ein hohes Risiko für Fehler 2. Art führt zu verpassten Chancen: nützliche Produkte oder Optimierungen werden nicht übernommen, Investitionen in vielversprechende Ideen verschoben, und das Lernen aus Daten verlangsamt sich.

Umkehrung

Fehler 1. Art ist das Gegenstück: ein nicht vorhandenes Ergebnis zu erkennen; die aggressive Minimierung von Fehler 2. Art durch Anhebung von Alpha kann die Rate falsch positiver Ergebnisse erhöhen.

Abgrenzung

Gilt für Hypothesentests und Entscheidungen auf Basis von Stichproben; umfasst nicht Implementationsfehler, unbeobachtete Confounding-Effekte in kausalen Behauptungen oder nicht stationäre Umgebungen, die frühere Tests ungültig machen.

Semantische Spannung

Es besteht eine Spannungsbeziehung zwischen dem Bestreben, falsch negative Ergebnisse zu vermeiden (Fehler 2. Art), und der Notwendigkeit, falsch positive Ergebnisse (Fehler 1. Art) zu begrenzen; dieser Trade-off zeigt sich in Stichprobenplanung und Kosten-Nutzen-Überlegungen.

Synthese

Fehler 2. Art bezeichnet falsch negative Entscheidungen in der Inferenz: das Nicht-Zurückweisen einer falschen Nullhypothese, gesteuert durch Power und Stichprobendesign, mit praktischen Folgen in Form verpasster Werte und verlangsamter Entscheidungen.