Коэффициент Каппа Флейса для оценки согласия между несколькими экспертами

Коэффициент Каппа Флейса — это непараметрическая статистика для измерения степени согласия между тремя или более экспертами (оценщиками), которые классифицируют объекты по взаимоисключающим номинальным категориям. Представленный Джозефом Л. Флейсом в 1971 году как обобщение каппы Коэна для более чем двух экспертов, он корректирует наблюдаемое согласие на уровень согласия, ожидаемый случайным образом, что делает его стандартным индексом надежности в исследованиях медицинских диагнозов, контент-анализе и исследованиях с участием нескольких кодировщиков.