Analytische Validierung und Testgenauigkeit

Die analytische Validierung ist der Prozess, bei dem nachgewiesen wird, dass ein Messverfahren wie beabsichtigt funktioniert, bevor es zur Untersuchung von Patienten eingesetzt wird, und die Testgenauigkeit beschreibt, wie gut die Ergebnisse eines Tests den wahren klinischen Zustand widerspiegeln. Zusammen beantworten sie zwei unterschiedliche Fragen: Misst der Assay zuverlässig, was er zu messen vorgibt (analytische Leistung), und klassifiziert ein Ergebnis die Patienten korrekt (diagnostische Genauigkeit)?

Definition

Die analytische Validierung ist der dokumentierte Nachweis, dass ein Messverfahren vordefinierte Leistungsspezifikationen wie Präzision, Richtigkeit und Nachweisgrenzen erfüllt; die diagnostische Testgenauigkeit ist der Grad, in dem ein Test das Vorhandensein vom Nichtvorhandensein eines Zielzustands im Vergleich zu einem Referenzstandard korrekt unterscheidet.

Scope

Dieses Thema behandelt die analytischen Leistungsmerkmale, die während der Methodenvalidierung ermittelt werden – Präzision, Richtigkeit, Linearität, Nachweis- und Quantifizierungsgrenzen sowie analytische Spezifität und Interferenz – und die diagnostischen Genauigkeitsmaße, die ein Testergebnis mit einem klinischen Referenzstandard in Beziehung setzen, einschließlich Sensitivität, Spezifität und prädiktive Werte. Es handelt sich um eine methodische Referenz und schreibt nicht vor, wie ein spezifischer Test zu validieren oder zu interpretieren ist.

Core questions

• Welche analytischen Leistungsmerkmale müssen etabliert werden, bevor eine Methode klinisch eingesetzt wird?
• Wie unterscheiden sich Präzision und Richtigkeit, und wie wird jede geschätzt?
• Wie werden Sensitivität, Spezifität und prädiktive Werte definiert und interpretiert?
• Warum muss die diagnostische Genauigkeit anhand eines Referenzstandards beurteilt und wie transparent berichtet werden?

Key concepts

• Validierung vs. Verifizierung
• Präzision (Wiederholbarkeit und Reproduzierbarkeit)
• Richtigkeit und Bias
• Nachweisgrenze und Quantifizierungsgrenze
• Linearität und analytischer Messbereich
• Analytische Spezifität und Interferenz
• Sensitivität und Spezifität
• Prädiktive Werte und Prävalenzabhängigkeit
• Methodenvergleich (Bland-Altman-Übereinstimmung)
• Referenzstandard

Mechanisms

Die analytische Validierung charakterisiert ein Messverfahren anhand vordefinierter Spezifikationen. Die Präzision – die Übereinstimmung wiederholter Ergebnisse – wird durch Mehrfachmessungen unter Wiederholbarkeits- und Reproduzierbarkeitsbedingungen geschätzt; die Richtigkeit – die Übereinstimmung mit einem wahren Wert – wird anhand von Referenzmaterialien oder Vergleichsmethoden bewertet, wobei die Abweichung (Bias) die Differenz quantifiziert. Nachweis- und Quantifizierungsgrenzen definieren die niedrigsten Konzentrationen, die die Methode zuverlässig berichten kann, die Linearität definiert den analytischen Messbereich, und Interferenzstudien etablieren die analytische Spezifität. Die diagnostische Genauigkeit ist eine separate Bewertung: Testergebnisse werden mit einem Referenzstandard verglichen, um die Sensitivität (der Anteil der wirklich Kranken, die korrekt identifiziert wurden) und die Spezifität (der Anteil der wirklich Nicht-Kranken, die korrekt identifiziert wurden) zu berechnen. Prädiktive Werte übersetzen diese in die Wahrscheinlichkeit einer Erkrankung bei einem gegebenen Ergebnis und hängen daher von der Prävalenz des Zustands in der getesteten Population ab. Methodenvergleichsstudien, oft zusammengefasst mit Bland-Altman-Übereinstimmungsplots, bewerten, ob ein neues Verfahren mit einem etablierten übereinstimmt.

Clinical relevance

Ein Test, der nicht analytisch validiert ist oder dessen diagnostische Genauigkeit schlecht charakterisiert ist, kann Kliniker in die Irre führen; insbesondere prädiktive Werte verschieben sich mit der Krankheitsprävalenz, sodass dieselbe Sensitivität und Spezifität in Screening- versus Hochprävalenz-Einstellungen unterschiedliche Bedeutungen haben. Dieses Thema beschreibt, wie diese Leistung etabliert und berichtet wird; es dient der kritischen Bewertung von Tests und ist keine Grundlage für individuelle diagnostische Entscheidungen.

Evidence & guidelines

Die transparente Berichterstattung über diagnostische Genauigkeitsstudien wird durch die STARD-Erklärung geleitet, deren Überarbeitung von 2015 wesentliche Berichtspunkte auflistet. Die Bewertung der analytischen Leistung folgt standardisierten Protokollen wie der CLSI EP-Reihe für Präzision und Methodenvergleich, und die Methodenübereinstimmung wird üblicherweise mit dem Bland-Altman-Ansatz bewertet. Fachspezifische Leitlinien definieren Qualitäts- und Validierungsanforderungen für bestimmte Analyten.

History

Die Bewertung diagnostischer Tests reifte, als Sensitivität und Spezifität, abgeleitet aus der Screening-Theorie, zu Standardbeschreibungen der Testleistung wurden und als die Bayes'sche Argumentation klärte, wie prädiktive Werte von der Prävalenz abhängen. Der Bland-Altman-Ansatz zur Methodenübereinstimmung von 1986 veränderte die Art und Weise, wie neue Messverfahren mit etablierten verglichen werden. Die Besorgnis, dass diagnostische Genauigkeitsstudien unvollständig berichtet wurden, führte zur STARD-Berichtsrichtlinie, die erstmals 2003 veröffentlicht und 2015 aktualisiert wurde, während Normungsgremien analytische Validierungsprotokolle kodifizierten.

Debates

Validierung versus Verifizierung einer Methode

Ein Labor, das eine neue Methode entwickelt, muss deren Leistung vollständig validieren, während ein Labor, das eine bereits validierte kommerzielle Methode übernimmt, nur überprüfen muss, ob sie vor Ort wie behauptet funktioniert; wie viele Nachweise jeweils erforderlich sind und wo die Grenze liegt, ist eine wiederkehrende praktische Frage.

Berichterstattung und Reproduzierbarkeit von diagnostischen Genauigkeitsstudien

Eine unvollständige Berichterstattung über die Patientenauswahl, den Referenzstandard und unbestimmte Ergebnisse kann die scheinbare Genauigkeit erhöhen, was die STARD-Checkliste motivierte; die Debatte darüber, wie vollständig Studien diese einhalten, dauert an.

Key figures

• Patrick Bossuyt
• J. Martin Bland
• Douglas G. Altman

Seminal works

• bland-altman-1986
• bossuyt-2015

Frequently asked questions

Was ist der Unterschied zwischen analytischer Validierung und diagnostischer Genauigkeit?

Die analytische Validierung zeigt, dass ein Messverfahren zuverlässig funktioniert – mit ausreichender Präzision, Richtigkeit und Nachweisgrenzen –, während die diagnostische Genauigkeit beschreibt, wie gut die resultierenden Werte Patienten korrekt gegen einen klinischen Referenzstandard klassifizieren. Ein Test kann analytisch einwandfrei sein, aber eine begrenzte diagnostische Genauigkeit aufweisen und umgekehrt.

Warum ändern sich prädiktive Werte zwischen verschiedenen Umgebungen, während Sensitivität und Spezifität ähnlich bleiben?

Sensitivität und Spezifität sind weitgehend Eigenschaften des Tests, aber prädiktive Werte – die Wahrscheinlichkeit einer Erkrankung bei einem gegebenen Ergebnis – hängen auch davon ab, wie häufig der Zustand in der getesteten Population ist, sodass derselbe Test je nach Prävalenz mehr oder weniger informativ ist.