Standardisierte Tests und normorientierte Beurteilung

Standardisierte Tests und normorientierte Beurteilungen sind die Anwendung formaler Instrumente, die unter festgelegten Bedingungen durchgeführt und bewertet werden, sodass die Leistung einer Person mit der Verteilung der Ergebnisse verglichen werden kann, die von einer repräsentativen Referenz- (normativen) Stichprobe erhalten wurden. In der Sprachtherapie liefern diese Instrumente Standardwerte, Perzentilränge und Altersäquivalente, die zur Unterstützung von Entscheidungen bezüglich Förderfähigkeit, Schweregrad und Diagnose herangezogen werden.

Definition

Ein normorientierter Test ist ein Messinstrument, das unter standardisierten Bedingungen durchgeführt und bewertet wird und dessen Interpretation durch den Vergleich des Rohwerts einer Person mit der Verteilung der Werte einer definierten normativen Stichprobe erfolgt, typischerweise ausgedrückt als Standardwerte oder Perzentilränge.

Scope

Dieses Thema behandelt die Logik der normorientierten Messung, die Bedeutung der Standardisierung, die psychometrischen Eigenschaften (Reliabilität, Validität, normative Angemessenheit), die die Vertrauenswürdigkeit eines Tests bestimmen, sowie die Interpretation und Grenzen von Cut-off-Kriterien. Es behandelt standardisierte Tests als eine Form der Beurteilung innerhalb der Sprachtherapie und als methodisches Thema, nicht als Anleitung zur Testung einer Einzelperson.

Core questions

• Was sagt uns ein Standardwert tatsächlich über eine Person im Vergleich zu Gleichaltrigen?
• Wie angemessen müssen die normative Stichprobe, die Reliabilität und die Validität eines Tests sein, bevor seine Werte eine Diagnose leiten können?
• Wo sollte ein diagnostischer Cut-off festgelegt werden, und wie beeinflusst diese Wahl Sensitivität und Spezifität?
• Wann ist normorientiertes Testen das falsche Instrument, und was sollte es ergänzen?

Key concepts

• Standardisierung von Durchführung und Bewertung
• Normative (Referenz-)Stichprobe
• Standardwert, Perzentilrang, Altersäquivalent
• Reliabilität (Test-Retest, interne Konsistenz)
• Validität (Konstrukt, Inhalt, Kriterium)
• Sensitivität, Spezifität und diagnostische Cut-offs
• Standardmessfehler
• Normorientierte versus kriteriumsorientierte Interpretation

Mechanisms

Ein Test wird standardisiert, indem die Items, das Durchführungsverfahren und die Bewertungsregeln festgelegt und anschließend an einer normativen Stichprobe durchgeführt werden, die so ausgewählt wurde, dass sie die interessierende Population repräsentiert. Der Rohwert einer Person wird unter Verwendung der Verteilung dieser Stichprobe in einen Standardwert oder Perzentilrang umgewandelt, der die Person im Verhältnis zu Gleichaltrigen positioniert. Der interpretative Wert dieser Position hängt von der Reliabilität des Tests (Messkonsistenz), seiner Validität (ob er das beabsichtigte Konstrukt misst) und der Repräsentativität der Normen ab. Die diagnostische Verwendung fügt eine Entscheidungsregel hinzu: einen Cut-off, unterhalb dessen die Leistung als gestört behandelt wird, dessen Platzierung den Kompromiss zwischen Sensitivität und Spezifität steuert (Spaulding, Plante & Farinella, 2006).

Clinical relevance

Normorientierte Werte bestimmen häufig die Berechtigung für Leistungen und den dokumentierten Schweregrad einer Kommunikationsstörung, sodass ihre psychometrische Qualität direkte Auswirkungen darauf hat, wer identifiziert wird. Dieser Eintrag beschreibt, wie solche Werte abgeleitet und interpretiert werden und unter welchen Bedingungen sie vertrauenswürdig sind; er dient der Referenzorientierung und schreibt nicht vor, wie eine bestimmte Person zu testen oder zu diagnostizieren ist.

Evidence & guidelines

Methodologische Überprüfungen haben wiederholt ergeben, dass viele veröffentlichte Sprach- und Artikulationstests grundlegende psychometrische Kriterien für Reliabilität, Validität und normative Angemessenheit nicht erfüllen, was vor einer unkritischen Verlassung auf ihre Werte warnt (McCauley & Swisher, 1984). Analysen von Förderfähigkeitskriterien zeigen, dass gängige Cut-offs (zum Beispiel Leistungen eine oder mehrere Standardabweichungen unter dem Mittelwert) Kinder mit Sprachbeeinträchtigungen nicht konsistent von typisch entwickelnden Gleichaltrigen unterscheiden, da Tests sich in ihrer diagnostischen Genauigkeit unterscheiden (Spaulding et al., 2006). Die Standards for Educational and Psychological Testing legen allgemeine Erwartungen an die Testentwicklung, den Nachweis der Validität und die faire Nutzung fest (AERA, APA & NCME, 2014).

History

Die normorientierte Testung bei Kommunikationsstörungen expandierte Mitte des 20. Jahrhunderts rasch im Zuge der breiteren psychometrischen Bewegung, die von Persönlichkeiten wie Anastasi kodifiziert wurde. In den 1980er Jahren führte die Verbreitung von Sprach- und Artikulationstests zu einer systematischen psychometrischen Prüfung (McCauley & Swisher, 1984), und nachfolgende Arbeiten verlagerten den Schwerpunkt von bequemen Cut-offs hin zu dokumentierter diagnostischer Genauigkeit und der Integration standardisierter Werte mit anderen Beurteilungsnachweisen (Spaulding et al., 2006).

Debates

Reicht eine Leistung unterhalb eines konventionellen Cut-offs aus, um eine Beeinträchtigung zu diagnostizieren?

Diagnostische Cut-offs wie -1 oder -1,25 Standardabweichungen werden häufig verwendet, aber ihre Sensitivität und Spezifität variieren zwischen den Tests; das Vertrauen auf einen einzigen konventionellen Schwellenwert kann sowohl zu einer Über- als auch zu einer Unteridentifizierung von Kindern führen, daher sollte der Cut-off durch die gemessene diagnostische Genauigkeit des Tests gerechtfertigt sein.

Wie gut repräsentieren normative Stichproben diverse Populationen?

Wenn eine normative Stichprobe den sprachlichen oder kulturellen Hintergrund einer Person nicht repräsentiert, können Standardwerte die Fähigkeiten falsch darstellen, was langjährige Fragen zur fairen Nutzung normorientierter Tests in verschiedenen Populationen aufwirft.

Key figures

• Rebecca McCauley
• Linda Swisher
• Elena Plante
• Tammie Spaulding
• Anne Anastasi

Seminal works

• mccauley-swisher-1984
• spaulding-2006
• anastasi-urbina-1997

Frequently asked questions

Was ist der Unterschied zwischen normorientierter und kriteriumsorientierter Beurteilung?

Die normorientierte Beurteilung vergleicht den Wert einer Person mit der Verteilung einer Referenzstichprobe, um die relative Position aufzuzeigen, während die kriteriumsorientierte Beurteilung die Leistung anhand einer definierten Fähigkeit oder eines Standards vergleicht, unabhängig davon, wie Gleichaltrige abschneiden.

Warum ist der Standardmessfehler wichtig?

Da kein Test perfekt zuverlässig ist, ist ein erhaltener Wert eine Schätzung; der Standardmessfehler quantifiziert seine Unsicherheit und ist der Grund, warum Werte am besten als Konfidenzintervalle und nicht als exakte Punkte interpretiert werden, insbesondere in der Nähe eines diagnostischen Cut-offs.