Transcript Разработка измерительных материалов с использованием подходов PIRLS

Разработка измерительных
материалов с использованием
подходов PIRLS
Ковалева Г.С.
Международная конференция,
19-20 июня 2013 года
Исследование PIRLS и основные
направления разработок
• Широкомасштабный эксперимент
• Планируемые результаты ФГОС НОО
• Итоговая оценка достижения
планируемых результатов ФГОС НОО
(русский язык, литературное чтение,
метапредметные результаты)
• Методика «Тяни-Толкай»
2
Особенности
комплексной работы для оценки читательской
грамотности
Комплексная работа направлена на
выявление у учащихся 4 класса одного из
основных
метапредметных
результатов
обучения сформированности умений:
- читать и понимать различные тексты,
включая и учебные;
- работать с информацией, представленной
в различной форме;
- использовать полученную в тексте
информацию для решения различных учебнопознавательных и учебно-практических задач.
Особенности
комплексной работы
В работе оценивается сформированность трех
групп умений (1 группа – 30%, 2 группа – 40%,
3 группа – 30%)
Группа 1. Общее понимание текста, ориентация
в тексте (включает в себя поиск и выявление в
тексте информации, представленной в различном
виде (ориентация в тексте), а также
формулирование прямых выводов и заключений
на основе фактов, имеющихся в тексте (общее
понимание того, что говорится в тексте, понимание
основной идеи).
Особенности
комплексной работы (три группы заданий)
Группа 2. Глубокое и детальное понимание
содержания и формы текста (включает в себя
анализ, интерпретацию и обобщение информации,
представленной в тексте, формулирование на ее
основе сложных выводов и оценочных суждений,
например, определить, с какой целью написан
текст).
Особенности
комплексной работы (три группы заданий)
Группа 3. Использование информации из текста
для различных целей (включает в себя
использование информации из текста для
различных целей: для решения различного круга
задач без привлечения или с привлечением
дополнительных знаний).
Состав инструментария
Разработанный инструментарий включает
следующие материалы:
1. Рекомендации по проведению комплексной
работы для учащихся 4 классов.
2. Комплексная работа для учащихся 4 классов (4
варианта).
3. Рекомендации по оценке выполнения заданий
комплексной работы для учащихся 4 классов и
вводу данных в электронные формы.
4. Формы для ввода и первичной обработки
данных (на электронных носителях).
5. Формы представления результатов.
Примеры заданий
Примеры заданий (группа 1)
1 балл – 33%, 2 балла – 57%
Примеры заданий (группа 2)
1 балл - 57%
Примеры заданий (группа 1 и 3)
А: 1 балл – 93%, Б: 1 балл – 40%, 2 балла – 16%, 3 балла – 11%
Примеры комплексных работ
Примеры заданий (группа 1 и 3)
3: 2) – 90%, 4: 1б – 56%, 2б – 29%
Примеры заданий (группа 2)
5: 1б – 40%, 2б – 41%, 16: 4) 86%, 17: 63%
Основные показатели, по которым
представляются результаты
1. Успешность сформированности умений работать с
текстом. Его количественной характеристикой является
общий балл за выполнение всей работы (по 100балльной шкале).
2. Успешность сформированности отдельных групп
умений работать с текстом: общее понимание текста,
ориентация в тексте; глубокое и детальное понимание
содержания и формы текста; использование
информации из текста для различных целей. Его
количественной характеристикой является общий балл
за выполнение заданий каждой группы умений
независимо от предметной области (по 100-балльной
шкале).
Решение об освоении учебного материала
– достижении планируемых результатов
• Критерий задается в зависимости от типа
используемых заданий, возможной ошибки измерения, а
также срока введения стандарта.
• Принятый в практике педагогических измерений
минимальный критерий освоения учебного материала
находится в пределах от 50 до 65% от максимального
балла, который можно получить за выполнение заданий
базового уровня. Для заданий с выбором ответа – 65%,
для заданий со свободным ответом (кратким или
развернутым) – 50% при условии, что стандарт
(планируемые результаты) введен и обеспечено его
16
освоение в учебном процессе.
Результаты апробации:
В апробации метапредметной части
инструментария приняли участие более 11
тысяч учащихся из 165 образовательных
учреждений 16 регионов.
17
Некоторые характеристики
измерительных материалов (1)
Вариант
1. Александр
Невский
2. Занимательные
опыты
3. Удивительные
животные
4. Семья
Число
заданий
Макс.
балл
Средний
балл
Надежность
% учащихся , не
приступавших к
выполнению
последнего задания
15 (16)
21
13,8
0,71
8
17
24
17,4
0,72
11
16
25
15,1
0,74
11
17
22
15,8
0,72
12
Некоторые характеристики
измерительных материалов (2)
19
Перечень статистических форм, полученных
образовательными учреждениями
По каждому образовательному учреждению (классу)
1. Результаты выполнения итоговой работы
«Метапредметные результаты» по классу (форма Ф-ОИДМП-1);
2. Результаты выполнения итоговой работы
«Метапредметные результаты» по отдельным заданиям
(форма Ф-ОИД-МП-3);
3. Результаты выполнения итоговой работы
«Метапредметные результаты» по отдельным заданиям
по каждому ученику (форма Ф-ОИД-МП-4).
Ф-ОИД-1: Ф – форма, ОИД – оценка индивидуальных достижений, МП –
метапредметные результаты.
20
Примеры
статистических
форм, полученных
образовательными
учреждениями.
Пример 1.
-
21
Примеры статистических форм, полученных
образовательными учреждениями.
Пример 2.
22
Российская
Академия
образования
Москва,
14 декабря
2011
Измерительные материалы для
оценки метапредметных
результатов (комплексные рабоы):
Проблемы разработки инструментария для оценки
метапредметных результатов (когнитивной и
коммуникативной составляющих)
1. Разделение оценочных процедур при оценке
предметных и метапредметных результатов
2. Подбор текстов для оценки читательской грамотности
(соответствие возрастным особенностям
современных детей, их интересам и потребностям,
тестологическим требованиям и др.)
3. Разработка заданий, активизирующих познавательную
деятельность учащихся
4. Обеспечение качества измерительных материалов
5. Интерпретация и использование результатов
24
Спасибо за внимание!
Ковалева Галина Сергеевна,
руководитель Центра оценки
качества образования Института
содержания и методов обучения
РАО
Тел./факс: (499)-246-24-21
e-mail: [email protected]
сайты: www.centeroko.ru
25