Transcript Формирование фонда оценочных средств для контроля

Формирование фонда оценочных
средств для контроля освоения ОПОП
студентами ОУ СПО
Агафонова Лариса Михайловна,
зам. директора ГБОУ СПО НАТК
ПМ n
ПМ 1
УД 1
УД n
Основная профессиональная
образовательная программа
2
ВПД: освоен/не освоен
Цель: доказать, что модуль освоен
3
Оценка качества освоения основных
образовательных программ
текущий контроль
промежуточная
аттестация
государственная итоговая
аттестацию выпускников
Все должно быть отражено в
оценочных средствах
4
ЧТО ТАКОЕ ФОНД ОЦЕНОЧНЫХ
СРЕДСТВ?

комплект методических и контрольных
материалов, предназначенных для
оценивания компетенций и ЗУН на
разных стадиях обучения студентов,

для аттестационных испытаний
выпускников на соответствие уровня
их подготовки требованиям
соответствующего ФГОС по
завершению освоения конкретной
ОПОП.
5

Фонды оценочных средств
разрабатываются по каждой
дисциплине или
профессиональному модулю

Целесообразность разработки ФОС
одноименных дисциплин, профилированных
для различных направлений подготовки
(специальностей, профессий), определяется
соответствующей предметно-цикловой
комиссией.
6
СОСТАВ ФОС
 средства
для текущей аттестации
 средства для промежуточной
аттестации студентов;
 средства для итоговой аттестации
выпускников.
7
В ОПОП СПО это…
Оценивание в
процессе
обучения
аттестация
промежуточная
Текущий
контроль
Рубежный
контроль
Защита практ., лаборт.,
проектных и др. работ;
Ответы на вопросы:
воспроизведение инф-ии,
«на применение»,
проблемные и др.
Кейс-метод, в т.ч.
ситуационные задачи
Деловая (ролевая) игра
и др.
Зачет
Диф. зачет
итоговая
(ГИА)
В НПО: ВКР
(выпускная практ.
квалиф. работа и
Экзамен
письменная экз.
Экзамен
работа)
(квалификационный)
В СПО: дипломная
работа / проект
НПО и СПО: гос
экзамен (вводится по
усмотрению ОУ0 8
ТИПЫ И ФОРМЫ КОНТРОЛЯ И
АТТЕСТАЦИИ
Текущий и рубежный
 Контрольная работа
 Лабораторная работа
 Практическая работа
 Устный опрос
Промежуточная аттестация
 Экзамен
 Экзамен квалификационный
 Дифференцированный зачет
 Зачет
Итоговая государственная аттестация
 ВКР
9
ТИПЫ
контрольно-оценочных заданий
«КОНСТРУКТОР»
«ПРОЕКТ»
- изготовление действующей
модели механизма;
- изготовление предмета
декоративно-прикладного
искусства
Сборка механизма (с проверкой его
на работоспособность)
«РОЛЬ»
Групповая имитационная игра,
включающая роли всех участников
технологического процесса
«ИССЛЕДОВАНИЕ»
- диагностика технического средства
с определением поломки (дефекта);
- прогнозирование развития
ситуации
«СИТУАЦИЯ»
Кейс: предложить
оптимальный путь
разрешения проблемы
10
ТИПЫ ОЦЕНОЧНЫХ ЗАДАНИЙ
ПО НАПРАВЛЕННОСТИ
•
•
•
ориентированные на проверку освоения вида деятельности в целом;
проверяющие освоение группы компетенций;
проверяющие отдельные компетенции внутри профессионального модуля.
ПО ХАРАКТЕРУ
ТИП
ПРИМЕР
ПРОЕКТ
Озеленение территории, блюдо,
деталь
ИССЛЕДОВАНИЕ
Диагностика транспортного средства
КОНСТРУКТОР
Сборка узла автомобиля
РОЛЬ
Прием заказа у клиента
СИТУАЦИЯ
Разработка бизнес-плана
11
Возможные формы
экзамена (квалификационного)
 Экзамен «здесь
 Накопительный
и сейчас»
экзамен
(несколько этапов проверки)
 Защита курсового проекта
(работы)
 Сбор и защита портфолио
 и др.
12
ОЦЕНКА РЕЗУЛЬТАТОВ
ПОДГОТОВКИ
 Процесс
сбора свидетельств
(доказательств) деятельности
обучающегося,
 вынесения суждения
относительно этих
свидетельств на основе
заранее определенных
критериев.
13
Прямое доказательство –
преподаватель (экзаменатор) может его
услышать или увидеть: наблюдать
деятельность; оценить качество
продукта; получить ответ на вопросы.
 Косвенное доказательство:
а) Свидетельское показание
(непосредственное или
документированное).
б) Смоделированная ситуация.

ВИДЫ ДОКАЗАТЕЛЬСТВ
14
МЕТОДЫ ОЦЕНКИ
Количественные
•отметки, баллы, рейтинг
Качественные
•анализ, экспертиза,
•интерпретация результатов
наблюдения
15
ОБЪЕКТ И МЕТОД ОЦЕНКИ
Объект
Продукт
деятельности
Процесс
деятельности
Объем
профессионально
значимой
информации
Метод
Соответствие эталону
Соответствие алгоритму
(регламенту)
Соответствие научным
подходам
Экспертная
оценка
Экспертная
оценка
Поэтапный
контроль
Наблюдение
Опрос
Семинар
Контрольная
работа
16
ОЦЕНОЧНЫЕ
СРЕДСТВА (ОС)
ОС – это контрольные задания,
описания форм и процедур,
предназначенных для определения
качества освоения обучающимися
учебного материала, учебной
дисциплины, профессионального
модуля.
17
КИМы и КОМы…
В соответствии с
законом «Об
образовании»
каждый
выпускник
должен
подтвердить свой
образовательный
уровень и/или
квалификацию.
ФОС
Образовательный
уровень
Квалификация
контрольноизмерительные
(КИМ)
контрольно
(компетентностно)оценочные (КОМ)
18
КОМы…
Контрольно (компетентностно) оценочные материалы оценивают
уровень квалификации.
 Уровень квалификации оценивается
качественно,
 оценка о соответствии предъявляемых
компетенций квалификационным
требованиям выносится
квалифицированными экспертами.

19
СПОСОБЫ ОЦЕНКИ КОМПЕТЕНЦИЙ
как материальный или
интеллектуальный продукт
деятельности;
 как процесс деятельности (когда
результат деятельности не оформлен
как продукт или принципиально важен
сам процесс).

20
Для оценки продукта деятельности
можно использовать сравнение
представленного продукта с
эталоном.
 Для оценки процесса можно
использовать сравнение с эталонной
технологией на основе совокупности
критериев.

СПОСОБЫ ОЦЕНКИ КОМПЕТЕНЦИЙ
21
ВИДЫ ПРОДУКТНЫХ ЗАДАНИЙ
 практические
задания;
 проекты или проектные
задания.
22
СПОСОБЫ ОЦЕНКИ ПРОЦЕССА
наблюдение за процессом выполнения
деятельности в режиме реального
времени;
 просмотр видеозаписи;
 формализованное наблюдение
(структурированное наблюдение) - это
специально организованное
(целенаправленное и
систематизированное) отслеживание
деятельности обучающегося на рабочем
месте (или его имитация) в реальном
времени (или в видеозаписи).

23
ОЦЕНКА ОБЩИХ КОМПЕТЕНЦИЙ
Оценка ОК нигде не локализована,
рассредоточена.
 Собирать доказательства формирования
ОК необходимо на всем периоде
обучения,
 Возможная форма – портфолио.

24
Практический опыт является
результатом прохождения учебной
практики или производственной
практики.
 Аттестация проводится в форме зачета.
 На зачет должен быть предоставлен
аттестационный лист оценки
профессиональной деятельности
студента во время прохождения
практики с приложениями.

ОЦЕНКА ПРАКТИЧЕСКОГО ОПЫТА
25
Разработка и утверждение ФОС
Преподаватели
КОC УД
Выпускающая ЦМК
КОС ГИА
КОС УД
ОПОП
КОС
ПМ
КОС ПМ
Работодатель
Ф
О
С
КОНТРОЛЬ И ОЦЕНКА РЕЗУЛЬТАТОВ
ОСВОЕНИЯ ПРОФЕССИОНАЛЬНОГО МОДУЛЯ
Результаты
(освоенные
профессиональные
компетенции)
Готовить и
оформлять простые
блюда из яиц и
творога
Основные
показатели оценки
результата
обоснованный выбор
технологического
оборудования,
инвентаря,
инструментов и
безопасное его
использование…
Формы и методы
контроля и оценки
Комплексный экзамен
по профессиональному
модулю
ДИСЦИПЛИНЫ
Результаты обучения (освоенные умения,
усвоенные знания)
Формы и методы контроля и
оценки результатов обучения
Уметь: производить санитарную
обработку оборудования и инвентаря
Знать: классификацию моющих средств,
правила их применения, условия и сроки
их хранения;
Оценка результатов
лабораторной работы
«Маркировка и санитарная
обработка посуды,
инвентаря и оборудования»
ПРОВЕРКА РЕЗУЛЬТАТОВ
(В ПМ)
МДК (Т)
ВПД
МДК (ЛПЗ) УП ПП
+
компетенции
умения
знания
+
+
+
+
+
+
+
+
+
ЭКЗАМЕН (КВАЛИФИКАЦИОННЫЙ)
ТРЕБОВАНИЯ
К ПРОДУКТУ
(ГОСТ …)
ОЦЕНКА
ПРОДУКТ
ДЕЯТЕЛЬНОСТИ
«ГОТОВЫЙ»
ПРОЦЕСС
ДЕЯТЕЛЬНОСТИ
«ЗДЕСЬ И СЕЙЧАС»
Экзамен
(квалификационный)
БЕЗ ЗАЩИТЫ
(ОБОСНОВАНИЯ)
ТРЕБОВАНИЯ
К ПРОЦЕССУ
(соблюдение
технологии)
«ДОКУМЕНТЫ»
ТРЕБОВАНИЯ
К ДОКУМЕНТАМ
С ЗАЩИТОЙ
(ОБОСНОВАНИЕМ)
Анализ показателей оценки результата в
5 разделе программы модуля
Корректность формулировки показателей
результата
Продукт
практической
деятельности
Показатель освоения
компетенций
Процесс
практической
деятельности
«ОЦЕНЩИК»
Критерий качества:
Соответствие
алгоритму
КОМПЛЕКТ ОЦЕНОЧНЫХ СРЕДСТВ
(НА ПРИМЕРЕ ПМ)
ПАСПОРТ КОС ПМ
результаты освоения программы ↔ перечень заданий
формы промежуточной аттестации:
- экзамен (квалификационный) обязательно
-ДЗ или Э по МДК
- З или ДЗ по УП и/или ПП
} по выбору ОУ
ТЕКСТЫ ЗАДАНИЙ
для обучающихся
для оценивающих
УСЛОВИЯ ОЦЕНИВАНИЯ
(контроль и аттестация)
КУРСОВАЯ РАБОТА (ПРОЕКТ)
Исследование/
Проектирование
Защита
Выбор темы
Практика
ПОРТФОЛИО
Сбор артефактов
Постановка
цели
Самооценка
Выбор
материалов
для
представления
Оценка руководителем
Защита
 МДК
– тесты,
контрольные задания,
накопительная система
(рейтинг, портфолио)
 УП,
ПП – тесты,
практические работы,
накопительная система
(рейтинг, портфолио)





Экзамен (квалификационный) –
накопительная система,
только практическое задание,
практическое задание +
портфолио,
комплексное задание с
теоретической частью (в виде
тестов, контрольных заданий,
составления технологических карт
и т.д.)+практическое задание +
представление результатов +
портфолио.
34
ГОСУДАРСТВЕННАЯ (ИТОГОВАЯ)
АТТЕСТАЦИЯ
Условие допуска
подтверждение освоения компетенций
по видам профессиональной деятельности
Формы
обязательно - защита дипломной работы
по желанию ОУ - экзамены
Состав комиссии
представители образовательного и
профессионального сообщества
Фонд оценочных средств
Характеристики
Объект измерения
Достижения
обучающихся
Форма оценивания
Контрольно-измерительные
материалы (КИМ)
Знания, умения
Измеряют
Оценивают в баллах
(пятибалльная система)
Контрольно-оценочные
средства (КОС)
Компетенции
Дают качественную
оценку
Вид профессиональной
деятельности освоен/не
освоен
Вид контроля по
этапам обучения
Входной, текущий, рубежный,
промежуточная аттестация по
учебной дисциплине (УД),
междисциплинарному курсу
(МДК)
Аттестация по
профессиональному
модулю.
Экзамен
квалификационный
Разработка/
утверждение
Преподаватель/ЦМК/
Заместитель директора
ЦМК/заместитель
директора/
работодатель
Формы, методы
контроля
Раздел 4 рабочей программы
дисциплины
Раздел
5 рабочей программы
профессионального
модуля (ПМ)
Объект оценки
Знания
Понимание
Способы
применения знаний
Отглагольные существительные
Определение, описание, перечисление, изложение,
указание, формулирование и т.д.
Объяснение, обоснование, различение, оценивание,
доказательство,
иллюстрирование,
интерпретация,
представление выводов, прогнозирование, обобщение и т.д.
Применение, использование, решение, соотнесение,
подготовка, расчет, демонстрация, создание; анализ, выбор,
различение, разделение и т.д.
Аналитические и Планирование, выделение, создание, распределение по
организационные
категориям, разработка, составление, организация, оценка,
умения
обоснование, интерпретация, анализ, сравнение и т.д.
Практические
умения
Выполнение,
создание,
изготовление,
получение,
проектирование,
измерение,
осуществление,
конструирование, разборка, использование, управление,
сотрудничество, принятие участия, безопасная работа,
демонстрация, изображение и т.д.
ТРЕБОВАНИЯ К ОЦЕНОЧНЫМ СРЕДСТВАМ
ДЛЯ ПРОВЕРКИ СФОРМИРОВАННОСТИ
КОМПЕТЕНЦИЙ
1. Интегративность (междисциплинарный характер,
связь теории и практики);
2. Проблемно-деятельностный характер;
3. Ориентация на применение умений и знаний в
нетиповых ситуациях (нетождественность
предлагаемых заданий стандартизированным
учебным задачам);
4. Актуализация в заданиях содержания
профессиональной деятельности;
5. Экспертиза в профессиональном сообществе;
6. Связь критериев с планируемыми результатами
КОНТРОЛЬ И ОЦЕНКА РЕЗУЛЬТАТОВ
ОСВОЕНИЯ
профессионального модуля
Результаты
(освоенные
профессиональные
компетенции)
Основные
показатели оценки
результата
Формы и методы
контроля и оценки
ОТПРАВНАЯ ТОЧКА РАБОТЫ
НАД КОНТРОЛЬНООЦЕНОЧНЫМИ
МАТЕРИАЛАМИ
Разработка типовых заданий для
экзамена (квалификационного) по ПМ
Сгруппировать общие и профессиональные
компетенции
 Направленность заданий на решение
профессиональных задач (ситуации
профессиональной деятельности)
 Разработать экспертный лист (критерии
оценивания)
 Обозначить требования для выполнения
(место, время, оснащение)

Основные методы оценки
♦ практические задания по демонстрации умений;
♦ сбор образцов деятельности обучающихся,
демонстрирующих освоение ими требуемых
компетенций;
♦ свидетельства, демонстрируемые в процессе
смоделированной или реальной трудовой ситуации;
♦ экзамен (беседа, собеседование, тестирование,
интервью);
♦ журналы/дневники, которые ведут обучающиеся;
♦ индивидуальные или групповые проекты
♦ портфолио
Виды свидетельств
♦ физические объекты, произведенные обучающимся;
♦ деятельность обучающегося (под наблюдением
оценщика);
♦ свидетельства, представленные другими людьми,
которые наблюдали за обучающимся (видеозаписи,
аудиозаписи и т.д.);
♦ результаты выполнения заданий, включая проекты и
case studies;
♦ ответы на письменные/устные вопросы;
♦ результаты ролевых игр;
♦ записи в журналах обучающегося, «портфель
свидетельств».
Задания
Задание: содержит описание (условия),
составленное преподавателем (или другим
уполномоченным лицом), в котором
указывается время, отводимое на выполнение
задания.
Задания могут быть устными или
письменными, представлять собой анализ
конкретных ситуаций из практики, наблюдения
и т.д.
Практическое задание по
демонстрации компетенций
Где – в различных условиях (учебная
аудитория, на рабочем месте,
лаборатория)
 Как – индивидуально или в группе
 Когда – на любом этапе обучения
 Обеспечить - инструкциями по
выполнению задания, материалами и
ресурсами

Оценочные задания (оценка всех
параметров, отражающих освоение
компетенций)
В задании должно быть четко отражено:
- Что предстоит выполнить
обучающемуся;
- Где он будет выполнять задание;
- Чем может воспользоваться;
- В каком виде требуется предоставить
результат;
- Критерии оценки;
- Время для работы над заданием;
Оценка выполнения задания по
критериям
Накопительная:
Балл за задание = К1+К2+…+Кn,
где Кi – балл по i-му критерию
Штрафная:
Балл за задание = Баллмах– Ш1 – Ш2 – … Шn,
где Баллmax – максимальный балл за
задание, а Шi – штраф по i-му критерию
Штрафная система
Оценка компетенций мастераоптика
Практическое задание:
Изготовьте очки по рецепту с астигматическими
линзами в полуободковую (с креплением линз на леске)
оправу. Положение зрачка в проёме ободка на средней линии
оправы.
Задание считается не выполненным при отклонениях
параметров очков от рецепта, превышающих допустимые
пределы ГОСТа.
Время выполнения – 30 минут.
Штрафы за недостатки продукта
•
•
•
•
За максимальное совпадение параметров очков с
заданием начисляется 50 бонусных баллов.
Минус 5 баллов за отклонение оптических
центров линз в проемах ободков по вертикали от
средней линии оправы за каждый мм
(максимально допустимое отклонение 2 мм).
Минус 5 баллов за расхождение оптических
центров линз по вертикали на 1 мм.
Минус 5 баллов за отклонение межзрачкового
расстояния от заданного за каждый мм.
Минус 5 баллов за отклонение направления оси
цилиндра от заданного за каждый градус.
Пакет экзаменатора
УСЛОВИЯ
Количество вариантов задания для экзаменующегося
– 2
Время выполнения задания - 30 минут
Оборудование: ПК, бланки, ИС Эдельвейс, телефон
Литература для учащегося:
Справочная литература: «Правила предоставления
гостиничных услуг в Российской Федерации».
ОТВЕТСТВЕННОСТЬ
ЗА РАЗРАБОТКУ ФОС
Ответственность за разработку ФОС
несет предметно-цикловая комиссия в
соответствии с приказом учебного
заведения.
 Ответственным исполнителем
разработки фонда оценочных средств
является председатель ЦМК.

50
ИСПОЛНИТЕЛЬ РАЗРАБОТКИ ФОС
 Непосредственный
исполнитель
разработки ФОС назначается
председателем ЦМК из числа
ведущих преподавателей.
 ФОС может разрабатываться
коллективом авторов.
51
ПРИМЕРНАЯ СТРУКТУРА ФОНДА
ОЦЕНОЧНЫХ СРЕДСТВ

совокупность контрольно (компетентностно) оценочных материалов (опросников, тестов,
кейсов и др.), предназначенных для
оценивания результатов и процесса
формирования компетенций на определенных
этапах обучения (на входе у студентов первого
курса, приступающих к освоению ОПОП, после
первого курса, на ключевых этапах обучения
на старших курсах, после практик, на этапе
подготовки к защите дипломной работы и др.);
52
ПРИМЕРНАЯ СТРУКТУРА ФОНДА
ОЦЕНОЧНЫХ СРЕДСТВ



методические материалы, определяющие
процедуры оценивания на всех этапах
контроля (описание процедур входного
контроля уровня сформированности общих
компетенций студентов первого курса в
начале освоения ОПОП; материалы для
проверки компетенций на разных стадиях
освоения ОПОП по направлениям
подготовки);
требования к квалификации организаторов
оценивания;
технологии и методы обработки
результатов оценивания компетенций;
53
ПРИМЕРНАЯ СТРУКТУРА ФОНДА
ОЦЕНОЧНЫХ СРЕДСТВ

методические материалы, определяющие
процедуру оценивания, а также инструкции и
программно-инструментальные средства
обработки результатов, статистического анализа
данных, графической визуализации и
интерпретации, форматы представления их
пользователям;

наборы показателей, а также критерии оценки
уровней сформированности компетенций
(критерий оценки соответствия должны быть
одними и теми же для всех участников
оценивания) и шкалы оценивания в соответствии
с задачами контроля;
54
ПРИМЕРНАЯ СТРУКТУРА ФОНДА
ОЦЕНОЧНЫХ СРЕДСТВ
рекомендации по интерпретации
результатов оценивания и методические
материалы, определяющие процедуру
обсуждения результатов со студентами,
рекомендации по накоплению оценок и
их использованию в портфолио
студента;
 программы подготовки оценщиков и
экспертов для проведения контрольнооценочных процедур;

55
ПРИМЕРНАЯ СТРУКТУРА ФОНДА
ОЦЕНОЧНЫХ СРЕДСТВ
совокупность заданий,
предназначенных для предъявления
выпускнику на ГИА и критерии их
оценки;
 методические материалы,
определяющие процедуру проведения
ГИА;

56
ПРИМЕРНАЯ СТРУКТУРА ФОНДА
ОЦЕНОЧНЫХ СРЕДСТВ


для выпускной квалификационной
работы: методические материалы,
определяющие процедуру и критерии оценки
соответствия уровня подготовки выпускника
требованиям ФГОС, на основе данных о ходе
подготовки, выполнения и защиты им
выпускной квалификационной работы;
рекомендации по обновлению компонентов
фонда оценочных средств (периодичность,
степень обновления, изменения процедур,
методов, технологий, показателей, критериев
и др.).
57
ЭКСПЕРТИЗА ФОС
Фонды оценочных средств должны
проходить экспертизу:
 учебно-методических объединений
(организаций);
 представителей работодателей и
профессиональных сообществ;
 независимых экспертных организаций
58
Алгоритм разработки КОС по
учебной дисциплине (1)
Алгоритм разработки КОС по
учебной дисциплине (2)
Анализ и, в случае необходимости,
корректировка и уточнение показателей
оценки результата, приведенных в 4
разделе
программы учебной дисциплины.
Главным критерием корректности
формулировки является измеримость
показателя.
Планируемый знаниевый
образовательный
результат представляет собой единство
предметного знания и уровня его
освоения: содержит описание единицы
содержания и того, что с ней необходимо
сделать (воспроизвести,
продемонстрировать понимание,
применить,
проанализировать, обобщить, оценить),
чтобы показать, на каком уровне освоено
данное содержание.
Планируемый навыковый
образовательный
результат
описывается также, как знаниевый
результат на уровне применения и
дополняется указаниями на условия
выполнения деятельности, которые могут
свидетельствовать о достижении
требуемого автоматизма
Оформляем таблицу раздела 2 КОС по
УД
Типы заданий
Алгоритм разработки КОС по учебной
дисциплине (3)
Определить формы контроля для текущего контроля и
промежуточной аттестации (расчетные, тестовые,
проектные задания, практическое или проектное
задание и т.д.).
Результаты внести в таблицу раздела 3.
Алгоритм разработки КОС по
учебной дисциплине (4)
Разработка заданий для текущего
контроля и промежуточной
аттестации в разделе 6. КОС по УД
Структура задания в КОС по УД
6.1.1. Перечень объектов контроля и
оценки
Наименование объектов
контроля и оценки
Основные показатели
оценки результата
Оценка
(кол-во баллов)
У1
З1
За правильный ответ на вопросы или верное решение задачи
выставляется положительная оценка – 1 балл.
За неправильный ответ на вопросы или неверное решение задачи
выставляется отрицательная оценка – 0 баллов.
Вариант 1 ………………..
Вариант 2 ……………….
Вариант n ……………….
Критерии оценки:
• оценка «отлично» выставляется обучающемуся, если ..………;
• оценка «хорошо» …………………………………………….…….;
• оценка «удовлетворительно» ……………………………………….….;
• оценка «неудовлетворительно» …………………………………………
Время на выполнение: ____ мин.
Алгоритм разработки КОС по
учебной дисциплине (5)
Алгоритм разработки КОС по
учебной дисциплине (6)
Оценочная ведомость по
профессиональному модулю