Управление качеством образования, Общероссийская система оценки качества образования и ЕГЭ Ковалева Галина Сергеевна заместитель директора ФИПИ Тел/факс 8 (095) 509-19-87 e-mail: kovaleva@fipi.org www.fipi.ru Качество образования • Под качеством образования понимается интегральная характеристика системы образования, отражающая степень соответствия реальных достигаемых результатов нормативным требованиям, социальным и личностным ожиданиям. Создание ОСОКО будет способствовать достижению следующих целей: • Повышению доступности качественного образования и защищенности граждан; • Повышение уровня информированности населения при принятии жизненно важных решений о продолжении образования; Создание ОСОКО будет способствовать: • Обеспечению единства образовательного пространства; • Принятию обоснованных управленческих решений по проблемам повышения качества образования и развития системы образования; • Развитию и совершенствованию структур и механизмов контроля, управления и обеспечения качества образования. Основные тенденции развития в области оценки качества образования • Изменение понимания качества образования; расширение круга влияния потребителей образовательных услуг на их качество и формирование понятия качества. • Комплексное рассмотрение проблем оценки качества образования, управления качеством образования и обеспечения качества образования. Основные тенденции развития в области оценки качества образования • Внедрение элементов системы оценки качества образования, способствующих развитию школы и повышению качества образования (сочетание внутренней и внешней оценки; сочетание оценочной деятельности как средства отчетности, так и средства оказания поддержки школе в ее развитии; введение самооценки школы как основы для ее развития и др.). • Использование многоуровнего системного моделирования при планировании Основные тенденции развития в области оценки качества образования • Более широкое понимание образовательных достижений. • Проведение широкомасштабных мониторинговых исследований качества образования на национальном и международном уровнях как основы для принятия управленческих решений. Основные тенденции развития в области оценки качества образования • Изменение понимания качества образования; расширение круга влияния потребителей образовательных услуг на их качество и формирование понятия качества. • Комплексное рассмотрение проблем оценки качества образования, управления качеством образования и обеспечения качества образования. Общероссийская система оценки качества образования • ОСОКО – это совокупность организационный и функциональных структур, обеспечивающих основанную на единой концептуально-методологической базе оценку образовательных достижений и выявление факторов, влияющих на образовательные достижения. Методологические основы для построения системы ОСОКО Основные системные принципы: целостность; структурность; иерархичность; активное взаимодействие с внешней средой. Действующие элементы ОСОКО МИНИСТЕРСТВО ОБРАЗОВАНИЯ И НАУКИ РОССИЙСКАЯ АКАДЕМИЯ ОБРАЗОВАНИЯ ЦЕНТР ОЦЕНКИ КАЧЕСТВА ОБРАЗОВАНИЯ ИСМО РАО ИНФОРМАЦИОННО АНАЛИТИЧЕСКИЙ ЦЕНТР РОСОБРНАДЗОРА СЛУЖБА СЕРТИФИКАЦИИ ТЕСТОВЫХ МАТЕРИАЛОВ РОСОБРНАДЗОР УПРАВЛЕНИЕ КОНТРОЛЯ КАЧЕСТВА ОБРАЗОВАНИЯ, НАУЧНО-МЕТОДИЧЕСКИЙ СОВЕТ ПО ОЦЕНКЕ КАЧЕСТВА ОБРАЗОВАНИЯ ФЕДЕРАЛЬНЫЙ ИНСТИТУТ ПЕДАГОГИЧЕСКИХ ИЗМЕРЕНИЙ ФЕДЕРАЛЬНЫЙ ЦЕНТР ТЕСТИРОВАНИЯ ЦЕНТР РАЗРАБОТКИ КИМ СЛУЖБА ОБРАЗОВАТЕЛЬНОГО МОНИТОРИНГА РЕГИОНАЛЬНЫЕ ОРГАНИЗАЦИИ СООТВЕТСТВУЮЩЕГО ПРОФИЛЯ СЛУЖБА ЛИЦЕНЗИРОВАН ИЯ, АТТЕСТАЦИИ И АККРЕДИТАЦИИ ОБРАЗОВАТЕЛЬН ЫХ УЧРЕЖДЕНИЙ СЛУЖБА АТТЕСТАЦИИ ПЕДАГОГИЧЕСКИХ И УПРАВЛЕНЧЕСКИХ КАДРОВ В СФЕРЕ ОБРАЗОВАНИЯ Модель общероссийской системы оценки качества образования Министерство образования и науки Рособрнадзор ФИПИ, РАО, ФЦТ и др. Национальный доклад Разработка методологических и научно-методических основ оценки качества образования и инструментария Проведение ЕГЭ, итоговой аттестации (9 класс) и мониторинга качества образования на всех уровнях Аккредитация и лицензирование образовате льных учреждений Информационно-аналитический центр Внешняя оценка качества подготовки кадров РЕЗУЛЬТАТЫ и базы данных Анализ состояния качества образования и тенденций изменений Единая база данных по оценке качества образования Организационная схема мониторинга образовательных достижений (общее образование) Ступени образования СТАРШАЯ ШКОЛА Аттестация Федеральны й мониторинг качества образования Профильный (ЕГЭ) и базовый экзамены Все выпускники Анализ результатов ЕГЭ Выборка ежегодно 11 класс 10 класс Стартовая диагностик Мониторинговые исследования по отдельным предметам, 1 раз в 4-5 лет Международные мониторинговые исследования Организационная схема мониторинга образовательных достижений (общее образование) ОСНОВНАЯ ШКОЛА 9 класс Итоговая аттестация Все выпускник и 8 класс 7 класс 6 класс 5 класс Стартовая диагностика Анализ результатов Выборка Мониторинговые исследования по отдельным предметам, проводимые совместно с международными исследованиями PISA Выборк а, 1 раз в 3 года TIMSS Выборк а 1 раз в 4 года Организационная схема мониторинга образовательных достижений (общее образование) Начальная школа 4 класс Итоговая аттестация Все выпускники Анализ результатов Выборка Стартова я диагности ка Готовнос ть к обучению Анализ результатов Выборка 3 класс 2 класс 1 класс TIMSS, PIRLS Выборка 1 раз в 45 лет Можно ли использовать результаты ЕГЭ в системе оценки качества образования? Основные задачи мониторинга образовательных достижений • Получение информации о состоянии образовательных достижений учащихся по основным учебным предметам • Выявление тенденций изменения состояния общеобразовательных достижений учащихся Основные задачи мониторинга образовательных достижений (продолжение) • Выявление факторов, оказывающих влияние на состояние образовательных достижений учащихся Современное понимание образовательных достижений • Освоение предметных знаний и умений • Умение применять эти знания на практике (в различных ситуациях реальной жизни, не только в контексте учебной дисциплины) Современное понимание образовательных достижений • Овладение междисциплинарными умениями: • - коммуникативными умениями (умения ясно выражать свои мысли устно или письменно, слушать и понимать других, понимать и анализировать прочитанный текст) • - умениями работать с информацией, представленной в различной виде (таблицы, графики и др.), Современное понимание образовательных достижений • - овладение информационными технологиями (умения работать с информацией с помощью компьютера), • - умения сотрудничать и работать в группах; • - умения учиться и самосовершенствоваться; • - умения решать проблемы и др. Вывод 1 • ЕГЭ позволяет получить информацию только об уровне общеобразовательной подготовки по отдельным предметам (достижение обязательного и повышенного уровней подготовки по предмету) Анализ результатов единого государственного экзамена, проведенного в 2005 г., позволяет: • получить обобщенную информацию об уровне и качестве общеобразовательной подготовки выпускников средней школы, сдававших единый государственный экзамен; • оценить степень овладения выпускниками средней школы проверяемым на экзамене содержанием учебных предметов, отраженным в обязательном минимуме содержания и требованиях к уровню Анализ результатов единого государственного экзамена, проведенного в 2005 г., позволяет: • получить информацию для оценки содержания нового варианта образовательных стандартов, реалистичности требований к уровню подготовки выпускников средней школы и возможности измерения их достижения; Анализ результатов единого государственного экзамена, проведенного в 2005 г., позволяет: • определить направления по совершенствованию образовательного процесса и учебно-методического обеспечения учебных предметов; • оценить качество контрольных измерительных материалов и наметить пути их совершенствования. Вывод 2 ЕГЭ позволяет получить информацию только об уровне общеобразовательной подготовки тех выпускников школы, которые сдавали ЕГЭ. Результаты ЕГЭ нельзя переносить на генеральную совокупность всех выпускников России. Участие 78 регионов в ЕГЭ 2005 года 2001 2002 2003 2004 2005 НЕ УЧАСТВУЮТ Участники ЕГЭ 2005 года Количество выпускников (78 регионов) – 1302793 Предмет РУ МА ФИ Кол-во регионов 69 70 55 Количество выпускнико в (в 78 регионах) 64619 7 67731 0 % от всех выпускнико в региона 50 52 ЛИ ХИ БИ ГГ ИС ОБЩ 24 55 54 41 49 39 7755 7 5717 2679 7 5593 3 1820 6 4230 6 6457 5 6 0,4 2 4 1,4 3,2 5 Статистически обоснованное сравнение регионов по результатам ЕГЭ 2005 года Математика (22 из 70 регионов) Русский язык (12 из 69 регионов) Карачаево-Черкесия, Карелия, Марий-Эл, Мордовия, Удмуртия, Чувашия, Алтайский край, Красноярский край, Хабаровский край,Белгородская область, Ивановская, Костромская, Мурманская, Пензенская, Самарская, Тамбовская, Тверская, Читинская, Агинский Бурятский АО, Коми-Пермяцкий АО, Таймырский АО Карелия, Белгородская область, Камчатская, Костромская, Мурманская, Самарская, Смоленская, Тамбовская, Тюменская, Читинская, Санкт-Петербург, Коми-Пермяцкий АО. Вывод 3 • Для управления качеством образования необходимо иметь информацию о результатах образования и факторах, влияющих на эти результаты. • Для определения политики в области образования необходимо иметь динамику развития системы образования. Вывод 4 • При определенных условиях Единый государственный экзамен может стать частью системы оценки качества образования. Требования к системе ЕГЭ для использования его результатов в системе оценки качества образования • Сравнимость результатов по годам • Содержательная интерпретация результатов • Наличие факторов, позволяющих объяснять полученные результаты • Сопоставимость системы ЕГЭ с национальными и международными исследованиями качества образования Сравнимость результатов по годам • Создание единого банка откалиброванных заданий • Разработка ротационных схем создания КИМ • Введение единой шкалы измерения Содержательная интерпретация результатов • Выделение отдельных уровней в подготовке учащихся (например, базового, повышенного и высокого) • Содержательное описание различных уровней достижения Физика 6509 33,2 3,5 22,5 Имеют базовую подготовку и выполняют задания повышенного уровня Имеют базовую подготовку и выполняют задания повышенного и высокого уровня Не имеют базовой подготовки, но выполняют задания повышенного уровня Имеют только базовую подготовку Не имеют базовой подготовки Число учащихся Предмет Уровень подготовки учащихся 11-х классов по физике Распределение учащихся 11-х классов по уровню их подготовки по предметам федерального компонента Базисного учебного плана (в %) Не имеют базовой Имеют базовую подготовку подготовки 38,2 2,6 Описание алгебраической подготовки выпускников Уровень математическо й подготовки участников экзамена Низкий: тестовый балл 1-37 отметка «2»., Процент выпускников 21,6% Описание алгебраической подготовки выпускников Выпускники этой группы не овладели ни одним из проверяемых элементов содержания на базовом уровне. Описание алгебраической подготовки выпускников Удовлетвори -тельный: тестовый балл 38-55 отметка «3». Процент выпускников 40,2% Выпускники этой группы овладели 6-8 элементами содержания из 13, которые контролировались с помощью заданий базового уровня сложности в каждом варианте КИМ Выпускники на базовом уровне овладели умением проводить преобразования радикалов и степеней, преобразования логарифмов и тригонометрических выражений по ограниченному набору формул. Эта категория выпускников умеет решать простейшие показательные и дробнорациональные неравенства, а также читать по графику свойства функций Описание алгебраической подготовки выпускников Хороший: тестовый балл 56-74 отметка «4». Процент выпускнико в 31,3% Выпускники этой группы овладели всеми элементами содержания, проверяемыми на базовом уровне: они умеют преобразовывать все изученные виды выражений, решать все уравнения и неравенства, исследовать свойства функций. Эта группа выпускников овладела (выполняет задания более 50% учащихся) большинством элементов содержания, освоение которых проверялись на повышенном уровне. Они овладели умениями: – преобразовывать выражения, включающие различные их виды, – исследовать свойства функций элементарными методами и с помощью производной, – решать комбинированные уравнения Описание алгебраической подготовки выпускников Высокий: тестовый балл 75-100 отметка «5». Процент выпускнико в 6,9% Выпускники этой группы успешно овладели всеми элементами содержания на базовом и повышенном уровнях, вынесенными на проверку в каждый из вариантов КИМ-2005. Эта группа выпускников показала овладение не только методами решения всех математических задач (о чем свидетельствует правильность ответов на задания с выбором ответа и с кратким ответом), но и показала умение математически грамотно и обоснованно записать свое решение при выполнении заданий с развернутым ответом Наличие факторов, позволяющих объяснять полученные результаты • • • • • Характеристики учащихся Воздействие семьи Характеристики учителей Характеристики учебного процесса Характеристики школы Сопоставимость системы ЕГЭ с общероссийскими исследованиями качества образования • Использование единой системы взаимодополняющих показателей • Использование общих подходов к разработке инструментария Сопоставимость системы ЕГЭ с международными требованиями • Учет международных тенденций в разработке инструментария ЕГЭ, обработке и анализе результатов (участие в международных программах) Зависимость результатов по математике образовательного учреждения от его социальноэкономического статуса Социально-экономический градиент образовательных учреждений России 700 500 300 -2,5 0,0 2,5 Index of economic, social and cultural status Зависимость результатов по математике образовательного учреждения от его социальноэкономического статуса (Финляндия) 800 500 200 -3 -2 -1 0 1 2 3 Зависимость результатов по математике образовательного учреждения от его социальноэкономического статуса (Япония) 800 500 200 -3 -2 -1 0 1 2 3 Эффективные учащиеся • • • • По результатам исследований PISA и TIMSS выявлено, что учащиеся будут хорошо учиться, если: Они хорошо мотивированы, Не тревожны, Верят в собственные силы и способности, Владеют эффективными стратегиями обучения (включая постановку цели, выбор стратегий, самоконтроль и самооценку процесса обучения) Эффективные школы в России • Более крупные образовательные учреждения с хорошей материальной базой, • С укомплектованным штатом учителей, • С хорошими образовательными ресурсами (библиотекой, лабораторным оборудованием, компьютерами и т.д.), • Более мотивированные учащиеся • Доброжелательные отношения между учащимися и учителями • Высокие требования к учащимся • Хорошая дисциплина и образовательный «климат» и др. СПАСИБО ЗА ВНИМАНИЕ! Вопросы и комментарии Ковалева Галина Сергеевна заместитель директора Федерального института педагогических измерений Тел/факс 8 (095) 509-19-87 www.fipi.org e-mail: kovaleva@fipi.org