Streuung und Abweichung

The centre is one number; spread says how far the data live from it.

Interaktive Simulation wird geladen...

Eine Schätzung kostet einen Freiheitsgrad 🖖

Das Stichprobenmittel ist genau der Wert, der die Summe der quadratischen Abweichungen so klein wie nur irgend möglich macht. Misst du eine Stichprobe um ihr eigenes Mittel, erhältst du also immer eine kleinere Summe als bei derselben Stichprobe, gemessen am Mittelwert der Grundgesamtheit, den du nicht sehen kannst. Teilst du durch n, übernimmst du diesen Fehlbetrag. Im obigen Experiment lassen Stichproben vom Umfang fünf den Divisor n um etwa ein Fünftel zu klein ausfallen. Das Ergebnis fällt bei jeder neuen Ziehung zu niedrig aus, nicht bloß im Durchschnitt. Die Division durch n − 1 ist der Faktor, der dieses Defizit wieder ausgleicht.

Standardabweichung ist kein mittlerer Abstand 🖖

Die Abweichungen zu quadrieren, sie zu mitteln und dann die Wurzel zu ziehen, ist nicht derselbe Vorgang wie das Mitteln der Abstände. Durch das Quadrieren zählt ein Wert mit doppeltem Abstand zum Mittel nämlich viermal so stark. Dieser Unterschied wirkt sich immer nur in eine Richtung aus. Die Standardabweichung ist für absolut keine Zahlenreihe jemals kleiner als die mittlere absolute Abweichung. Beide Werte sind nur dann exakt gleich, wenn jede Zahl denselben Abstand zum Mittelwert aufweist. Die Klassennoten zeigen 2,55 und 2,00; die Voreinstellung mit einem Ausreißer, die den Stichprobendivisor lädt, zeigt 5,15 und 3,13.

Der IQR ignoriert bewusst die Ränder 🖖

Der Interquartilsabstand verwirft das unterste und das oberste Viertel der Daten, noch bevor er irgendetwas misst. Genau das macht ihn unempfindlich gegenüber einem extremen Wert. Es macht ihn allerdings auch blind. Die enge Gruppierung und die Voreinstellung mit einem Ausreißer auf dieser Seite zeigen beide einen IQR von 2,00, während ihre Standardabweichungen bei 1,22 und 5,15 liegen. Ein IQR für sich allein sagt noch nichts darüber aus, wie weit die Daten reichen.

Aufgabe vollständig gelöst

  1. Der offensichtliche Ausreißer, den eine Drei-Sigma-Regel nicht melden kann 9 Schritte

    Die Voreinstellung mit einem Ausreißer enthält sieben Werte zwischen 4 und 7 und einen bei 20. Berechne den z-Wert dieses letzten Wertes aus der Stichproben-Standardabweichung, und entscheide dann, ob eine Regel, die alles jenseits von drei Standardabweichungen meldet, ihn jemals hätte fangen können.

    1. Addiere die acht Werte und teile sie auf: 60 auf 8 sind 7,50. Sieben der acht liegen darunter, der einzelne hohe Wert verschiebt also schon die Mitte, bevor er die Streuung überhaupt berührt.

    2. Zieh von jedem 7,50 ab. Die sieben dicht beieinanderliegenden Werte landen zwischen 0,5 und 3,5 entfernt, der achte ist 12,5 entfernt. Das Feld druckt diese Spalte, und sie summiert sich zu null, wie jede Abweichungsspalte.

    3. Das Quadrieren macht die Summe schief. Die sieben zusammen steuern 29,75 bei, der Wert bei 20 allein 156,25, also mehr als das Fünffache des ganzen übrigen Datensatzes. Genau dafür ist das Quadrieren da.

    4. Diese Voreinstellung lädt den Stichprobenmodus, der Divisor ist also 7 und nicht 8. Das Feld druckt den Bruch samt Ergebnis: 186,00 durch 7 ergeben eine Varianz von 26,57 und eine Standardabweichung von 5,15. Führ die Division eine Stelle weiter, und s ist 5,1547, was der nächste Schritt braucht.

    5. Ein z-Wert zählt Standardabweichungen vom Mittelwert, hier also 12,5 durch 5,1547, was 2,4249 ergibt. Der auffälligste Wert des Datensatzes erreicht die Drei nicht, und er kommt ihr nicht einmal nahe.

    6. Nun die Frage, ob das eine Tatsache über diese Liste ist oder über acht Zahlen überhaupt. Eines entscheidet sie: Die Abweichungen summieren sich zu null, also ergeben die anderen sieben zusammen genau das Negative der achten.

    7. Zahlen mit fester Summe haben die kleinstmögliche Quadratsumme, wenn sie alle gleich sind. Die sieben übrigen Abweichungen können also nicht alle klein sein: Am sparsamsten teilen sie die Last gleichmäßig auf, und das legt einen Boden unter die Quadratsumme.

    8. Ein Boden unter der Quadratsumme ist ein Boden unter s, und ein Boden unter s ist eine Decke über z. Kein Wert in einer Liste von n kann weiter als (n − 1)/√n Stichproben-Standardabweichungen vom Mittelwert liegen. Bei n = 8 liegt diese Decke bei 2,4749. Heb die 20 auf 100, und das Feld gibt eine Abweichung von 82,50 gegen eine Standardabweichung von 33,35 aus, z ist also 2,474. Heb sie auf eine Million, und z erreicht auf vier Stellen 2,4749, und dort bleibt es stehen.

    9. Die Decke hängt von n ab und von sonst nichts, und sie übersteigt 3 erstmals bei elf Werten: zehn schaffen 2,846, elf schaffen 3,015. Die Liste hier fasst zwölf, der Extremfall ist also erreichbar. Tipp zehn Nullen und eine 1000 ein, weiterhin im Stichprobenmodus. Das Feld gibt einen Mittelwert von 90,91 und eine Standardabweichung von 301,51 aus, und die größte Abweichung, 909,09, geteilt durch 301,51 ergibt 3,015, also genau die Decke.

    Antwort

    z = 2,42, und keine Drei-Sigma-Regel hätte das melden können, weil acht Zahlen kein z von 3 hervorbringen können, wie extrem eine von ihnen auch ist.

    Die Regel war hier weniger falsch als unbrauchbar, und das ist der Teil, den man mitnehmen sollte. Eine in Standardabweichungen geschriebene Schwelle ist ebenso sehr eine Aussage über den Stichprobenumfang wie über den Wert, denn der geprüfte Wert steckt in der Standardabweichung, an der er gemessen wird. Drei Standardabweichungen brauchen mindestens 11 Beobachtungen, ehe sie überhaupt erreichbar sind, vier brauchen 18, und unterhalb dieser Umfänge sieht eine verunreinigte Stichprobe für den Test genauso aus wie eine saubere. Etwas, das bei acht Zahlen funktioniert, steht bereits auf dieser Seite. Tukeys Zaun setzt die Grenze bei Q3 + 1,5 × IQR, das Feld gibt Q3 = 7,00 und IQR = 2,00 aus, der Zaun steht also bei 10 und der Wert 20 liegt weit außerhalb. Die Quartile sind Positionen in der sortierten Liste und keine Mittelwerte daraus, weshalb der beurteilte Punkt das Maß nicht verschieben darf.

Lernpfad

Eine Zahl für Viele: Statistisches Zusammenfassen

Beispielaufgaben

  • classroom scores - Acht Testergebnisse von 4 bis 13. Lies die mittlere Spalte von oben nach unten, und die Abweichungen heben sich zu null auf. Deshalb werden sie in der dritten Spalte zuerst quadriert. Diese Quadrate ergeben in der Summe 52,00, und bei n = 8 entspricht das einer Varianz von 6,50, einer Standardabweichung von 2,55 und einer mittleren absoluten Abweichung von 2,00.
  • tight cluster - Acht Messwerte zwischen 48,00 und 52,00. Der Streuung ist es egal, wie groß die Zahlen sind, sondern nur, wie weit sie auseinanderliegen: Die quadrierten Abweichungen ergeben 12,00 und die Standardabweichung liegt bei 1,22 gegenüber einer mittleren absoluten Abweichung von 1,00. Lade als Nächstes den Ausreißer-Datensatz und beobachte, wie sich dieses Paar voneinander entfernt.
  • one outlier - Sieben Werte drängen sich zwischen 4 und 7, und einer liegt bei 20. Dieser einzige Punkt steuert 156,25 zur Gesamtsumme von 186,00 in der Spalte der Quadrate bei. Dadurch erreicht die Standardabweichung 5,15, während die mittlere absolute Abweichung bei 3,13 stehen bleibt. Der Interquartilsabstand bemerkt davon nichts: Q1 und Q3 sind 5,00 und 7,00, sodass der IQR bei 2,00 bleibt, ganz gleich, wie weit draußen dieser letzte Wert liegt. Dies ist die einzige Voreinstellung, die den Stichprobenteiler lädt.