Fleiss' Kappa für die Übereinstimmung mehrerer Beurteiler

Fleiss' Kappa ist eine nichtparametrische Statistik zur Messung des Übereinstimmungsgrads zwischen drei oder mehr Beurteiler*innen, die Elemente in sich gegenseitig ausschließende nominale Kategorien einteilen. Sie wurde 1971 von Joseph L. Fleiss als Verallgemeinerung von Cohens Kappa über zwei Beurteiler hinaus eingeführt. Sie korrigiert die beobachtete Übereinstimmung um den Grad der zufällig erwarteten Übereinstimmung und macht sie damit zum Standard-Reliabilitätsindex in Studien zur medizinischen Diagnose, zur Inhaltsanalyse und in der Forschung mit mehreren Kodierer*innen.