Достаточность и полнота

Достаточная статистика сжимает выборку, не отбрасывая никакой информации о параметре; полнота добавляет уникальность, которая превращает такое сжатие в оптимальную оценку.

Definition

Статистика достаточна для параметра, если условное распределение данных при данной статистике не зависит от параметра; она полна, если никакая нетривиальная функция от нее не имеет нулевого математического ожидания для каждого значения параметра.

Scope

Эта тема охватывает определение достаточности, теорему факторизации Фишера-Неймана, минимальные достаточные статистики и способы их нахождения, полные и ограниченно полные статистики, роль экспоненциального семейства, вспомогательные статистики и теорему Басу о независимости полной достаточной статистики от любой вспомогательной статистики.

Core questions

• Как теорема факторизации позволяет считывать достаточность непосредственно из функции правдоподобия?
• Что такое минимальная достаточная статистика и как она строится?
• Почему полнота гарантирует уникальность несмещенной функции статистики?
• Как теорема Басу использует полноту для доказательства независимости без вычислений?

Key theories

Теорема факторизации

Статистика достаточна тогда и только тогда, когда совместная плотность факторизуется на часть, зависящую от данных только через эту статистику и параметр, и часть, зависящую только от данных.

Полнота и теорема Басу

Полнота обеспечивает уникальность несмещенных оценок, основанных на статистике; теорема Басу утверждает, что полная достаточная статистика независима от любой вспомогательной статистики.

Clinical relevance

Сведение данных к достаточной статистике оправдывает суммирование больших наборов данных несколькими числами без потери информации, что лежит в основе эффективного хранения, разработки сводных отчетов и построения оптимальных оценок, используемых во всей прикладной статистике.

History

Фишер ввел понятие достаточности в 1922 году как свойство статистики не терять информацию. Нейман предложил критерий факторизации, а Леманн и Шеффе разработали концепцию полноты в 1950-х годах; Басу доказал свою теорему о независимости в 1955 году, связав эти концепции воедино.

Key figures

• Ronald A. Fisher
• Jerzy Neyman
• Debabrata Basu
• Erich L. Lehmann

Seminal works

• lehmannCasella1998

Frequently asked questions

Почему достаточная статистика полезна?

Она позволяет заменить полный набор данных меньшим резюме, сохраняя при этом всю информацию, которую данные несут о параметре, упрощая вывод без каких-либо потерь.

Что такое вспомогательная статистика?

Статистика, распределение которой не зависит от параметра; согласно теореме Басу, она независима от любой полной достаточной статистики, что часто используется для упрощения вероятностных вычислений.