Измерительные материалы для оценки учебных достижений в

Измерительные материалы
для оценки учебных достижений
в целях сопровождения процедур
государственного контроля качества
образования
Решетникова Оксана Александровна
к.п.н., директор ФГБНУ «ФИПИ»
ФЗ «Об образовании в Российской Федерации»
Статья 8. Полномочия ОИВ в сфере образования
П.11… обеспечение осуществления мониторинга в системе
образования на уровне субъектов РФ
Статья 95. Независимая оценка качества образования
П.1 Независимая оценка КО осуществляется … в целях определения
соответствия предоставляемого образования потребностям
физического лица и юридического лица
Статья 97. Информационная открытость системы образования.
Мониторинг в системе образования.
П.3 Мониторинг системы образования – систематическое
стандартизированное наблюдение за состоянием образования
и динамикой изменений его результатов
П.4 Организация мониторинга системы образования осуществляется
федеральными государственными органами и ОИВ РФ в сфере
образования, органами местного самоуправления, осуществляющими
управление в сфере образования.
Пирамида образовательного оценивания
Углублённые
исследования
Региональный
мониторинг
Национальный
мониторинг
Национальные
экзамены
Внутриклассное оценивание
!
Проблемные зоны
организации региональных мониторингов
Отсутствие единого
научно обоснованного подхода
к региональным мониторинговым процедурам
Использование разными субъектами РФ
разнообразных по форме, содержанию
и качеству измерительных материалов
Разные условия проведения
процедуры мониторинга внутри региона,
отсутствие единого технологического
многофункционального решения
Виды мониторингов
…
Независимая оценка
учебных достижений
(в рамках организации
в регионе процедур
независимой оценки качества
образования)
Диагностические
работы
…
Контроль за
деятельностью ОО
(в рамках осуществления
переданных РФ полномочий
по государственному
контролю (надзору)
в сфере образования)
Проверочные
работы
Документы, регламентирующие
разработку диагностических и проверочных работ
4 классы, 5-6 классы
5-9 классы, 10-11 классы
(с учетом региональных
особенностей введения ФГОС)
(обучающиеся по ФКГОС)
Требования ФГОС
Кодификаторы ЕГЭ и ОГЭ
(на базе ФКГОС)
Планируемые результаты
и программы ПООП
Кодификаторы
диагностических работ
Кодификаторы
диагностических работ
Независимая оценка учебных достижений
Диагностические работы
Цель – оценка качества достижения обучающимися
требований образовательных стандартов для данного
этапа обучения.
Назначение диагностических работ:
 оценка индивидуальной общеобразовательной
подготовки по предмету на данном этапе обучения
 определение качества освоения требований
образовательных стандартов для всей совокупности
учащихся, участвующих в данной процедуре
Структура и содержание диагностических работ
Общие подходы
(с учетом специфики конкретного предмета):
 Использование предметного содержания, изученного в
течение текущего учебного года
 Варианты равноценны по сложности для обеспечения
равных возможностей для индивидуальной оценки
 Варианты могут оценивать достижение разных результатов
обучения (проверять разные элементы содержания или
разные умения) для получения максимума информации о
качестве предметной подготовки для всей выборки
участников
Структура и содержание диагностических работ
Уровни сложности заданий
 75% заданий
базового уровня
Освоение обязательного блока
результатов по отношению
к наиболее значимым элементам
содержания
 25% заданий
повышенного уровня
Действие в учебно-практических
и учебно-познавательных
ситуациях с учетом использования
понятийного аппарата по всему
объему изученного содержания
(для данного класса)
Формы заданий – весь спектр, используемый в ОГЭ/ЕГЭ
Примеры
Особенности диагностических работ
 Единовременно:
 1 предмет из блока гуманитарных или социально-гуманитарных
дисциплин
 1 предмет из блоков естественнонаучных дисциплин,
математики, информатики и ИКТ
 Мониторинговый цикл – два учебных года.
Следующий цикл:
 те же предметы в тех же классах
 «эволюционный дизайн» диагностических работ
(40-50% заданий предыдущего цикла)
 Выполнение диагностических работ не требует организации
специальной подготовки и повторения материала.
 Время проведения не превышает 45 мин.
 Дизайн диагностической работы соответствует дизайну
КИМ ОГЭ/ЕГЭ
Требования к процедуре проведения
диагностических работ
 Унифицированная процедура:
 Машиночитаемая форма
бланков ответа
 Автоматизированная проверка
 Проведение в присутствии
независимого наблюдателя
и т.д.
 Верификация ответов на задания с кратким ответом
 Проверка ответов на задания с развернутым
ответом независимыми экспертами
Информационное сопровождение
диагностических работ
1. Заблаговременная публикация
 Кодификатора
 Спецификации
 Структура и содержание работы, распределение заданий
по элементам содержания, проверяемым видам деятельности
и уровням сложности заданий
 Система оценивания отдельных заданий и работы в целом
 План работы
 Демонстрационного варианта диагностической работы
2. Проведение вебинаров для региональных
специалистов
Пример
Статистико-аналитическая информация,
получаемая по результатам диагностических работ
Регион
 процент учащихся, достигших требований образовательного
стандарта в сравнении с выборкой
 группы обучающихся с различным уровнем учебных достижений
в сравнении со всей выборкой
 распределение участников диагностики по полученным баллам
в сравнении со всей выборкой
 сравнение результатов выполнения диагностической работы
по региону со всей выборкой по отдельным позициям:
видам деятельности или элементам содержания
 сравнение результатов по уровням подготовки обучающихся
 дифференциация результатов по классам (или ОО)
 Влияние отдельных условий организации учебного процесса
на результаты обучения (по контекстной информации)
Статистико-аналитическая информация,
получаемая по результатам диагностических работ
Образовательная организация
 процент учащихся достигших требований образовательного
в сравнении с регионом (со всей выборкой)
 группы обучающихся с различным уровнем учебных
достижений в сравнении с регионом (со всей выборкой)
 распределение участников диагностики по полученным баллам
в сравнении с регионом (со всей выборкой)
 сравнение результатов выполнения диагностической работы
по классу с регионом (со всей выборкой) по видам
деятельности и элементам содержания
Проект пакетного предложения по обеспечению
независимой оценки учебных достижений
(ФИПИ/ ИМЦА)
Диагностические работы
Стандартная опция
Дополнительная
опция
Пакет 1
+ сбор контекстной
Варианты диагностических работ
информации
+ технология (подготовка,
тиражирование, обработка, проверка)
Пакет 2
Варианты диагностических работ
+ технология
+ статистические формы по
результатам диагностики
+ сбор контекстной
информации
+ статистические
формы
Пакет 3
Варианты диагностических работ
+ технология
+ статистические формы по
результатам диагностики
+ аналитика
+ сбор контекстной
информации
+ факторный анализ
Контроль учебных достижений
Проверочные работы
Цель – контроль достижения обучающимися ОО
требований образовательных стандартов (на базовом
уровне) для данного этапа обучения.
Назначение проверочных работ:
 определение
соответствия
индивидуальной
общеобразовательной подготовки по предмету на
данном этапе обучения требованиям образовательных
стандартов
Структура и содержание проверочных работ
Общие подходы и особенности
(с учетом специфики конкретного предмета):
 Оценка
наиболее
значимых
элементов
содержания
и наиболее важных видов деятельности только на базовом
уровне сложности (100% заданий базового уровня сложности)
 Использование предметного содержания, изученного в течение
текущего учебного года - кодификаторы
 Варианты равноценны по сложности для обеспечения равных
возможностей для индивидуальной оценки
 Минимальная граница определяет соответствие индивидуальной
подготовки
обучающегося
требованиям
образовательных
стандартов
 Форма заданий – весь спектр, используемый в ОГЭ/ЕГЭ
Информационное сопровождение
Заблаговременная публикация:
 Кодификатора
 Спецификации
 Демонстрационного варианта
Требования к процедуре
проведения проверочных работ
 Соблюдение условий информационной безопасности
при многоразовом использовании проверочных работ
в регионе
 Проведение в присутствии независимых
наблюдателей
 Обеспечение проверки
развернутых ответов
независимыми экспертами
ОПЦИОНАЛЬНО:
 Унифицированная процедура
 Автоматизированная
обработка с использованием
машиночитаемых бланков
Перспективы разработки и
использования ДИАГНОСТИЧЕСКИХ РАБОТ
ДЕКАБРЬ
АПРЕЛЬ
Предмет
1
_______
7 класс
Предмет
2
_______
8 класс
СЕНТЯБРЬ
Предмет
3
Предмет
_______
4
_______
8 класс
8 класс
физика
история
Предмет
Предмет
3
4
_______
_______
9 класс
9 класс
Перспективы разработки и
использования ПРОВЕРОЧНЫХ РАБОТ
Предмет
1
_______
6 класс
русский
язык
СТАРТ
РУБЕЖ
ИТОГ
Предмет
2
_______
5 класс
Предмет
3
_______
7 класс
Предмет
4
_______
8 класс
Роль ФИПИ в реализации организационной
схемы по обеспечению новой модели
контрольно-надзорной деятельности
 Методическое сопровождение оценки и контроля
качества образования
 разработка кодификаторов, спецификаций, демоверсий,
вариантов КИМ по учебным предметам
 участие в разработке подходов к сбору контекстной
информации
 участие в содержательном анализе результатов оценки
качества образования
 Перспективное направление: создание
диагностических и проверочных работ
банка
СПАСИБО ЗА ВНИМАНИЕ!
Решетникова Оксана Александровна
к.п.н. директор ФГБНУ «ФИПИ»
Тел/факс +7 (495) 225-10-35
reception@fipi.org
www.fipi.ru