Teststatistik

Eine Teststatistik, auch Prüfgröße, Testgröße oder Prüffunktion genannt, ist eine spezielle reellwertige Funktion in der Testtheorie, einem Teilgebiet der mathematischen Statistik. Teststatistiken werden als Hilfsfunktionen bei der Definition von statistischen Tests verwendet. So wird Beispielsweise bei einem Hypothesentest die Nullhypothese abgelehnt, wenn die Teststatistik über oder unter einem vorher festgelegten Zahlenwert liegt.

Definition

Gegeben sei eine Funktion

$T\colon {\mathcal {X}}\to \mathbb {R}$

sowie ein statistischer Test

$\varphi \colon {\mathcal {X}}\to [0,1]$,

der definiert ist durch

$\varphi (X)={\begin{cases}1&{\text{ falls }}T(X)>k\\0&{\text{ falls }}T(X)\leq k\end{cases}}$.

Hierbei ist $k$ eine feste Zahl, die auch der kritische Wert genannt wird. Dann wird die Funktion $T$ eine Teststatistik genannt.

Die Definition gilt ebenso für randomisierte Tests sowie Varianten der obigen Definition des Tests. Dazu gehört unter anderem das Vertauschen oder Abändern von Ungleichheitszeichen und Vertauschen von null und eins.

Beispiele

Unter Verwendung der Abkürzung

${\overline {X}}={\frac {1}{n}}\left(X_{1}+X_{2}+\dots +X_{n}\right)$

für das Stichprobenmittel ist eine typische Teststatistik auf ${\mathcal {X}}=\mathbb {R} ^{n}$ gegeben durch

$T(X)={\frac {{\overline {X}}-\mu }{\sigma }}$

Hierbei ist $\sigma$ eine positive Zahl und $\mu$ eine beliebige reelle Zahl. Diese Teststatistik findet beispielsweise bei den Gauß-Tests Anwendung. Dabei wird ausgenutzt, dass die Teststatistik standardnormalverteilt ist, d.h. $T\sim {\mathcal {N}}(0,1)$, wenn die Stichprobenvariablen $X_{1},X_{2},\dots ,X_{n}$ normalverteilt sind mit Erwartungswert $\mu$ und Varianz $\sigma ^{2}$.

Bezeichnet man mit

$V^{*}(X)={\frac {1}{n-1}}\sum _{i=1}^{n}(X_{i}-{\overline {X}})^{2}$

die korrigierte Stichprobenvarianz, so ist eine weitere wichtige Teststatistik auf ${\mathcal {X}}=\mathbb {R} ^{n}$ gegeben durch

$T(X)={\sqrt {n}}\cdot {\frac {{\overline {X}}-\mu }{\sqrt {V^{*}(X)}}}$.

Hierbei ist wieder $\mu$ eine beliebige reelle Zahl. Diese Teststatistik findet bei dem Einstichproben-t-Test Anwendung. Dabei wird ähnlich zum obigen Beispiel ausgenutzt, dass wenn die Stichprobenvariablen normalverteilt sind mit Varianz $\sigma ^{2}$ und Mittelwert $\mu$, die Teststatistik t-verteilt ist mit $n-1$ Freiheitsgraden. Es gilt dann $T\sim \mathbf {t} _{n-1}$.

Eine dritte wichtige Teststatistik ist

$T(X):=\sum _{i=1}^{n}\left({\frac {X_{i}-\mu }{\sigma }}\right)^{2}$

Dabei ist $\mu \in \mathbb {R}$ und $\sigma >0$. Sie wird beispielsweise beim Chi-Quadrat-Test für die Varianz verwendet. Dabei wird genutzt, dass $T$ Chi-Quadrat-Verteilt ist, wenn die Stichprobenvariablen normalverteilt sind mit Erwartungswert $\mu$ und Varianz $\sigma ^{2}$.

Vorteile

Betrachtet man einen Test $\varphi$ und bezeichnet mit $\operatorname {E} _{\vartheta }(X)$ die Bildung des Erwartungswertes bezüglich einer Wahrscheinlichkeitsverteilung $P_{\vartheta }$, so treten in der Testtheorie häufig Ausdrücke der Form

$\operatorname {E} _{\vartheta _{0}}(\varphi )$ oder $1-\operatorname {E} _{\vartheta _{1}}(\varphi )$

auf. Dabei entspricht der erste Ausdruck dem Fehler erster Art und der zweite dem Fehler zweiter Art, wenn $\vartheta _{0}$ in der Nullhypothese ist und $\vartheta _{1}$ in der Alternative. Im Allgemeinen sind solche Ausdrücke schwer zu berechnen, da der Test $\varphi$ selbst wenig Struktur besitzt

Geht man nun von einem nichtrandomisierten Test $\varphi$ aus (der randomisierte Fall folgt mit leichten Anpassungen), so lässt sich der Test schreiben als

$\varphi (X)=\mathbf {1} _{A}(X)$.

Hierbei ist $A$ der Ablehnbereich des Tests und $\mathbf {1} _{A}(X)$ die Indikatorfunktion auf der Menge $A$. Mit dieser Schreibweise folgt dann insbesondere

$\operatorname {E} _{\vartheta }(\varphi (X))=P_{\vartheta }(A)$,

siehe auch Charakteristische Funktion (Mathematik)#Verwendung zur Berechnung von Erwartungswert, Varianz und Kovarianz.

Ist der Test nun durch eine Teststatistik $T$ definiert, also Beispielsweise durch

$\varphi (X)={\begin{cases}1&{\text{ falls }}T(X)>k\\0&{\text{ falls }}T(X)\leq k\end{cases}}$,

so ist der Ablehnbereich von der Form

$A=\{x\in {\mathcal {X}}\mid T(X)>k\}$.

Damit reduziert sich aber die Bestimmung des Erwartungswertes des Tests zu

$\operatorname {E} _{\vartheta }(\varphi (X))=P_{\vartheta }(A)=P_{\vartheta }(\{x\in {\mathcal {X}}\mid T(X)>k\})$.

Damit lässt sich der Erwartungswert des Tests direkt bestimmen, wenn die Verteilung der Teststatistik bekannt ist. Wie die drei obigen Beispiele zeigen ist dies bei vielen wichtigen Tests der Fall.

Die einfachere Berechnung des Erwartungswertes über die Verteilung der Teststatistik wird auf verschiedene Weisen verwendet. Einerseits bei Hypothesentests vor der Datenauswertung, um den kritischen Wert $k$ so anzupassen, dass der Test den gewünschten Fehler erster Art einhält. Andererseits bei Signifikanztests nach der Datenauswertung zur Bestimmung des p-Wertes. Somit erleichtern Teststatistiken den Umgang und die Konstruktion von Tests.