Оценка образования и результаты обучения

Оценка образования — это процесс сбора и интерпретации данных о том, что учащиеся знают и умеют делать, в соответствии с определенными результатами обучения. Она различает оценку, которая поддерживает обучение (формирующая), и оценку, которая подтверждает достижения (итоговая), и оценивается по таким качествам, как валидность, надежность и образовательное воздействие.

Definition

Оценка образования — это систематический сбор и интерпретация данных об обучении в соответствии с намеченными результатами, используемые либо для поддержки дальнейшего обучения (формирующая), либо для принятия решений о достижениях и продвижении (итоговая); результаты обучения — это утверждения о том, что учащиеся должны уметь делать, и что оценка призвана измерять.

Scope

Эта тема охватывает цели и качества оценки в медицинском образовании, основы для определения того, что оценивать, контраст между формирующей и итоговой оценкой, а также связанную с этим идею оценки программы. Она рассматривает оценку как методологическую тему и не является руководством по выставлению оценок или экзаменации по какому-либо конкретному курсу.

Core questions

• Какова цель данной оценки — поддержать обучение или подтвердить его?
• На какой уровень компетенции нацелена оценка?
• Что делает оценку валидной, надежной и обоснованной?
• Как отдельные оценки объединяются в целостную программу?

Key concepts

• Формирующая и итоговая оценка
• Валидность и надежность
• Результаты и цели обучения
• Пирамида компетенций Миллера
• Оценка на рабочем месте
• Программная оценка
• Оценка программы

Key theories

Пирамида Миллера

Рамки, описывающие четыре восходящих уровня клинической оценки — знает, знает как, показывает как и делает — используемые для сопоставления методов оценки с уровнем оцениваемой компетенции.

Программная оценка

Подход, который рассматривает индивидуальные оценки как точки данных, целенаправленно объединенные с течением времени, оптимизируя всю программу как для обучения, так и для принятия решений, а не полагаясь на изолированные тесты с высокими ставками.

Полезность оценки

Представление о том, что ценность оценки является результатом нескольких качеств — валидности, надежности, образовательного воздействия, приемлемости и стоимости — которые должны быть сбалансированы, а не максимизированы по отдельности.

Mechanisms

Оценка разрабатывается путем сопоставления метода с целью и уровнем оцениваемой компетенции. Пирамида Миллера (Miller, 1990) упорядочивает методы от проверки знаний (знает, знает как) до наблюдения за выполнением (показывает как, делает), так что, например, письменные тесты подходят для более низких уровней, а наблюдение на рабочем месте — для более высоких. Выбранные методы затем оцениваются по полезности — валидности, надежности, влиянию на обучение, приемлемости и стоимости — и объединяются в программных подходах в целенаправленную последовательность точек данных с низкими и высокими ставками, которые вместе поддерживают как обучение, так и обоснованные решения (Epstein, 2007; Van der Vleuten et al., 2012). Оценка программы распространяет ту же логику на оценку самой образовательной программы (Frye & Hemmer, 2012).

Clinical relevance

Оценка формирует то, что изучают учащиеся, и как преподаватели оценивают компетенцию, поэтому понимание ее принципов поддерживает разработку и критику справедливой, обоснованной оценки в медицинском образовании. Тема описывает, как измеряется обучение, и не является основой для индивидуальных клинических решений.

Evidence & guidelines

Практика оценки в медицинских профессиях руководствуется широко цитируемыми рамками — пирамидой Миллера для сопоставления методов с компетенцией (Miller, 1990), концепцией полезности и обзорами методов оценки (Epstein, 2007), а также программной оценкой для объединения данных с течением времени (Van der Vleuten et al., 2012). Оценка программы опирается на устоявшиеся модели, такие как те, что обобщены Фраем и Хеммером (Frye & Hemmer, 2012). Большая часть этих данных носит концептуальный и консенсусный, а не экспериментальный характер.

History

Оценка в медицинских профессиях изменилась в конце двадцатого века от акцента на проверке знаний к прямому наблюдению за выполнением, что было кристаллизовано пирамидой Миллера 1990 года. Последующие десятилетия подчеркивали многомерную полезность оценки, методы, основанные на рабочем месте, и — в последнее время — программные подходы, которые интегрируют множество оценок с течением времени, а не полагаются на единичные экзамены с высокими ставками.

Debates

Могут ли валидность и надежность быть максимизированы одновременно?

Аутентичные, основанные на выполнении оценки часто повышают валидность за счет некоторой потери стандартизации и надежности, поэтому разработчики должны балансировать качества оценки, а не оптимизировать какое-либо одно, что является центральным противоречием в концепции полезности и программных подходах.

Key figures

• George Miller
• Cees van der Vleuten
• Ronald Epstein
• Lambert Schuwirth

Seminal works

• miller-1990
• epstein-2007
• vandervleuten-2012

Frequently asked questions

В чем разница между формирующей и итоговой оценкой?

Формирующая оценка предназначена для поддержки и направления дальнейшего обучения посредством обратной связи, в то время как итоговая оценка используется для подтверждения достижений и принятия таких решений, как прохождение курса или продвижение.

Что описывает пирамида Миллера?

Она описывает четыре уровня клинической компетенции — знает, знает как, показывает как и делает — и помогает сопоставить метод оценки с уровнем оцениваемой компетенции.