Единый государственный экзамен в системе оценки качества

Единый государственный экзамен в
системе оценки качества
образования
Г.С.Ковалева
ИСМО РАО
Цели исследований качества
образования
• Описание системы образования на разных уровнях
• Установление взаимосвязи между отдельными
объектами системы (показателями)
• Сравнение систем образования на различных
уровнях (региональном, федеральном и
международном)
• Выявление тенденций изменения состояния системы
образования
• Выявление факторов, оказывающих влияние на
состояние системы образования
Образовательные достижения и их
оценка
• Предметные знания и умения (включая применение
на практике в различных ситуациях реальной жизни,
не только в контексте учебной дисциплины)
• Универсальные способы действий
• Индивидуальный прогресс
• ИКТ компетентность
• Умения сотрудничать и работать в группах
• Умения учиться и самосовершенствоваться
• Умения решать проблемы
• Интерес к предметам
• Профессиональное самоопределение
• Ценностные ориентации и др.
Вывод 1
• ЕГЭ позволяет получить информацию только об
уровне общеобразовательной подготовки по
отдельным предметам (достижение базового и
повышенного уровней подготовки по предмету) для
групп выпускников, сдававших экзамен
Анализ результатов ЕГЭ в 2009 г.
позволяет:
• получить обобщенную информацию об уровне и качестве
общеобразовательной подготовки выпускников средней школы,
сдававших единый государственный экзамен;
• оценить степень овладения выпускниками средней школы
проверяемым на экзамене содержанием учебных предметов,
отраженным в обязательном минимуме содержания и
требованиях к уровню подготовки выпускников;
• описывать особенности подготовки различных групп учащихся с
учетом требований образовательных стандартов;
• определить
направления
по
совершенствованию
образовательного
процесса
и
учебно-методического
обеспечения учебных предметов;
• оценить качество контрольных измерительных материалов и
наметить пути их совершенствования;
• получить информацию для разработчиков стандартов второго
поколения (реалистичности требований к уровню подготовки
выпускников средней школы и возможности измерения их
достижения).
Результаты ЕГЭ 2009 года (май-июнь)
Предмет
Математика
Доля от
выпускников
текущего года
в составе
сдававших ЕГЭ
(доля в 2008 г.)
94,4 (88,2)
99,6 (99,3)
Русский
язык
Физика
20,4 (5,6)
Химия
7,4 (2,9)
Биология
15,5 (7,0)
География
3,4 (2,5)
Общество- 44,2 (12,4)
знание
История
18,4 (4,6)
(история
России)
Литература
5,1 (1,7)
Английски
7,6 (1,4)
й язык
Немецкий
0,5 (0,1)
язык
Французск
0,2 (0,04)
ий язык
Испанский
0,02 (-)
язык
Информати 6,9 (1,0)
ка и ИКТ
2009 год
Средний
Стандартное
тестовый
отклонение
балл
2008 год
Средний
Стандартное
тестовый
отклонение
балл
Доля учас- Число 100% 100% 100тников, не балльников балльнико балльнико
набравших
в 2009 г. в в 2009 г. в в 2008 г.
мин. кол-во
баллов ЕГЭ
(без
пересдачи),%
44,1
57,2
15,5
12,4
38,1
55,4
16,7
12,2
6,8
6,0
314
860
0,03
0,09
0,01
0,07
48,9
54,3
52,3
49,6
56,7
12,7
16,4
10,2
12,9
11,0
53,0
56,5
54,3
51,3
56,7
12,2
15,4
13,8
12,4
11,0
6,2
9,5
8,0
10,2
5,2
189
137
83
23
79
0,09
0,18
0,05
0,07
0,02
0,14
0,14
0,05
0,10
0,01
48,0
14,9
51,2
14,3
8,8
152
0,08
0,08
52,4
59,4
16,0
23,5
34,6
64,8
20,0
19,4
6,6
5,2
250
81
0,49
0,11
0,18
–
44,3
21,1
56,3
21,5
2,1
–
–
–
59,4
20,5
69,3
19,2
10,0
–
–
–
75,0
19,6
–
–
0
1
0,55
–
56,2
15,8
56,4
13,8
11,6
62
0,09
0,24
Уровни подготовки, ЕГЭ 2009
Распределение по уровням подготовки, ЕГЭ 2009 года
Ниже минимального
Минимальный
Низкий
Удовлетворительный
Хороший
Отличный
100%
90%
70%
60%
50%
40%
30%
20%
Пре дме т
иностранный
язык
литература
история
обществознание
информатика
география
биология
химия
физика
0%
математика
10%
русский язык
Доля участников
80%
Распределение экзаменуемых в субъектах РФ по
уровням образовательных достижений
по математике в ЕГЭ 2009
100%
отличный
уровень
(РФ)
90%
80%
хороший
уровень
(РФ)
60%
удовлетворительный
уровень
(РФ)
50%
40%
30%
низкий
уровень
(РФ)
20%
10%
0%
А1
А2
А3
А4
А5
А6
А7
А8
А9
Б1
Б2
Б3
Б4
Б5
Б6
Б7
Б8
Б9
В1
В2
B3
В4
В5
В6
В7
В8
В9
Г1
Г2
Г3
Г4
Г5
Г6
Г7
Г8
Г9
Д1
Д2
Д3
Д4
Д5
Д6
Д7
Д8
Д9
Е1
Е2
Е3
Е4
Е5
Е6
Е7
Е8
Е9
Ж1
Ж2
Ж3
Ж4
Ж5
Ж6
Ж7
Ж8
Ж9
З1
З2
З3
З4
З5
З6
З7
З8
З9
И1
И2
И3
И4
И5
И6
И7
И8
И9
К1
К2
К3
Процент сдававших ЕГЭ
70%
Субъект РФ
1
2
3
4
5
6
минимальный
уровень
(РФ)
Распределение экзаменуемых в субъектах РФ по
уровням образовательных достижений
по русскому языку в ЕГЭ 2009
100%
отличный
уровень (РФ)
90%
хороший уровень
(РФ)
70%
60%
удовлетворительный уровень
(РФ)
50%
40%
30%
низкий
уровень (РФ)
20%
10%
минимальный
уровень (РФ)
0%
Б4
Б9
А5
В1
В7
Г4
Б5
Г7
Г2
И4
Б6
В9
Д1
Е8
Д5
B3
Б8
А3
Д8
Г5
З1
Г1
Е3
В8
А9
Б7
Д4
Г8
Д2
А4
Е6
Ж3
Ж1
Г9
И2
А7
В2
К1
Ж9
Д6
Е1
Ж7
В5
Г6
З9
А8
И8
А1
Д9
В6
В4
И3
Е9
Ж4
И1
Е5
Д3
З2
Г3
Ж6
З5
Ж5
З4
Ж2
З3
Е4
З8
А2
Б3
Д7
Е7
А6
З6
И7
Ж8
З7
И6
К3
Е2
К2
Б2
И9
Б1
И5
Процент сдававших ЕГЭ
80%
Субъект РФ
1
2
3
4
5
6
Результаты выполнения заданий по алгебре
базового уровня сложности
с выбором ответа (А1-А10) , ЕГЭ 2009
100%
90%
Процент выполнения
80%
70%
60%
50%
40%
30%
20%
10%
0%
A1
A2
A3
A4
A5
A6
A7
A8
A9
A10
Номер задания
Минимальный
Низкий
Удовлетворительный
Хороший
Отличный
65%
Результаты выполнения заданий с кратким ответом базового
(В1, В2 – задания по алгебре, В3 – по геометрии)
и повышенного уровня сложности (В4-В8 – задания по
алгебре, В9 – алгебраическая текстовая задача, В10, В11 –
задачи по геометрии), ЕГЭ 2009
100%
90%
Процент выполнения
80%
70%
60%
50%
40%
30%
20%
10%
0%
B1
B2
B3
B4
B5
B6
B7
B8
B9
B10
B11
Номер задания
Минимальный
Низкий
Удовлетворительный
Хороший
Отличный
50%
Результаты выполнения заданий с развернутым
ответом повышенного (С1, С2)
и высокого уровня сложности (С3-С5), ЕГЭ 2009
100%
90%
Процент выполнения
80%
70%
60%
50%
40%
30%
20%
10%
0%
C1
C2
C3
C4
C5
Номер задания
Минимальный
Низкий
Удовлетворительный
Хороший
Отличный
50%
Описание минимального уровня
достижений, ЕГЭ 2009
Математика
Минимальный уровень Первичный
балл – 4
Тестовый балл – 21
Процент экзаменуемых, достигших и
превысивших данный уровень –
93,0%
Процент экзаменуемых в группе с
данным уровнем подготовки – 20,8%
Выпускники, показавшие
минимальную подготовку, имеют
непрочные, фрагментарные знания
по курсу алгебры основной школы и
курсу алгебры и начал анализа 10-11
класса, могут применять на базовом
уровне лишь 2-3 из изученных
алгоритмов.
Русский язык
Минимальный уровень
Первичный балл – 15
тестовый балл – 37
Процент экзаменуемых, достигших и превысивших
данный уровень – 93,6%
Процент экзаменуемых в группе с данным уровнем
подготовки – 19,7%
Экзаменуемые этой группы продемонстрировали:
– частичную сформированность умений,
относящихся к языковой компетенции. Это
умения:
проводить орфографический анализ по отдельным
темам (правописание личных окончаний глаголов
и суффиксов причастий настоящего времени и
правописание суффиксов различных частей речи
(кроме -Н-/-НН-);
– сформированность лингвистической
компетенции в том объёме, который позволяет
решать перечисленные выше задачи;
– частичную сформированность умений,
относящихся к коммуникативной компетенции.
Это умения:
адекватно понимать информацию (основную и
дополнительную, явную и скрытую) письменного
сообщения.
Выводы 2
• Для управления качеством образования необходимо
иметь информацию о результатах образования и
факторах, влияющих на эти результаты.
• Для определения политики в области образования
необходимо иметь динамику развития системы
образования.
• ЕГЭ может стать эффективной частью системы
оценки качества образования при определенных
условиях
Требования к ЕГЭ для использования его
результатов в системе управления
качеством образования
•
Сравнимость результатов ЕГЭ по годам (наличие единого банка
откалиброванных заданий, разработка моделей КИМ, позволяющих
сравнивать результаты по годам, введение и обеспечение единой
шкалы и др.)
•
Содержательная интерпретация результатов (выделение отдельных
уровней в подготовке учащихся, содержательное описание различных
уровней достижения и др.)
•
Наличие факторов, позволяющих корректно интерпретировать
полученные результаты (характеристики учащихся и их семей,
характеристики учителей, учебного процесса и образовательного
учреждения и др.)
•
Сопоставимость системы ЕГЭ с региональными, общероссийскими и
международными исследованиями качества образования (использование
единой системы взаимодополняющих показателей, использование общих
подходов к разработке инструментария, сравнимость шкалы ЕГЭ со
шкалами международных исследований и др.)
Качество и доступность образования
(субъекты РФ)
Математика 2009
60
средний тестовый балл
07
48
06
08
40
57
45
62
02
58
68
60
12 21
90
36 15
56
45 75
04
87
33
47 64
26 65
25
20
63
74
18
59
67
22
40
30
13
54
38
86
39
89
42
52
77
51
01
30
78
66
49
28
средний тестовый балл
09
50
– Россия в целом
– субъект РФ
65
13
55
35
Русский язык 2009
– Россия в целом
– субъект РФ
43
12
21
62
51
10 90
74
57
59
55 09
41 45
22
07
87
50
77
63
28
17
05
65
52 89
04 34
14
42 86
39
66
78
30
49
38
25
45
40
25
20
20
35
4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30
отношение дисперсий
5
6
7
8
9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27
отношение дисперсий
Качество и доступность образования
(расположение образовательных учреждений)
РУССКИЙ ЯЗЫК
МАТЕМАТИКА
– Россия в целом
– тип населенного пункта
64
– Россия в целом
– тип населенного пункта
46,5
46
9
средний тестовый балл
средний тестовый балл
62
60
58
5
6 8
7
4
56
3
2
54
0
5
44,5
44
7
6
43,5
5
43
42,5
2
1
42
8
3
4
41
10
15
отношение дисперсий
1.
2.
3.
4.
5.
6.
7.
8.
9.
45
41,5
1
52
9
45,5
20
25
30
0
5
10
15
20
25
30
отношение дисперсий
Населенный пункт сельского типа (село, деревня, хутор и пр.)
Населенный пункт городского типа (рабочий поселок, поселок городского типа и пр.)
Город населением < 50 тыс. человек.
Город населением 50-100 тыс. человек.
Город населением 100-450 тыс. человек.
Город населением 450-680 тыс. человек.
Город населением >680 тыс. человек.
г. Санкт-Петербург
г. Москва
35
40
Качество и доступность образования
(тип ОУ)
РУССКИЙ ЯЗЫК
МАТЕМАТИКА
– Россия в целом
– тип ОУ
65
60
2
60
55
1
55
3
6
50
5
45
средний тестовый балл
средний тестовый балл
– Россия в целом
– тип ОУ
4
40
35
30
50
45
30
20
20
10
15
отношение дисперсий
1.
2.
3.
4.
5.
6.
20
25
30
3
35
25
5
1
40
25
0
2
6
4
5
0
5
10
15
20
25
30
отношение дисперсий
Общеобразовательные учреждения
Общеобразовательная школа-интернат
Кадетская школа
Вечерние (сменные) общеобразовательные учреждения
Образовательные учреждения начального профессионального образования
Образовательные учреждения среднего профессионального образования
35
Качество и доступность образования
(вид ОУ)
РУССКИЙ ЯЗЫК
МАТЕМАТИКА
– Россия в целом
– вид ОУ
70
70
3
65
4
2
60
средний тестовый балл
средний тестовый балл
65
1
55
5
50
45
40
60
55
30
10
15
20
25
30
35
40
45
50
55
60
1
40
30
5
2
45
35
0
4
3
50
35
5
0
5
10
отношение дисперсий
1.
2.
3.
4.
5.
– Россия в целом
– вид ОУ
Средняя общеобразовательная школа
Средняя общеобразовательная школа с УИОП
Гимназия
Лицей
Центр образования
15
20
25
30
35
40
отношение дисперсий
45
50
55
60
65
Основные результаты выпускников средней школы, изучавших
углубленный курс математики (TIMSS-2008)
Основные результаты выпускников средней школы, изучавших
углубленный курс физики (TIMSS-2008)
Распределение учащихся стран по уровням
образовательных достижений по
математике (TIMSS-2008)
низкий уровень
100%
24
80%
11
3
11
3
11
18
38
70%
60%
6
высокий уровень
31
46
27
27
продвинутый уровень
2
11
1
8
1
8
20
26
20
27
50%
67
65
71
Норвегия
Швеция
59
Словения
Иран
Российская
Федерация
0%
Ливан
12
59
Италия
17
43
5
Нидерланды
44
20%
10%
41
28
Армения
87
40%
30%
1
3
9
Филиппины
90%
9
средний уровень
Распределение учащихся стран по уровням
образовательных достижений по физике
(TIMSS-2008)
21
19
12
11
19
80%
70%
23
32
32
60%
24
33
20
28
69
64
32
36
23
21
Норвегия
42
Словения
25
34
38
Армения
2
Российская
Федерация
0%
23
57
Нидерланды
10%
14
20
30%
20%
0
8
29
52
40%
9
2
9
Швеция
50%
10
продвинутый уровень
7
Иран
90%
высокий уровень
Ливан
100%
средний уровень
Италия
низкий уровень
Распределение результатов ОУ в
исследовании TIMSS (1995, 2008) по уровням
достижений (математика)
TIMSS-2008 (математика)
TIMSS-1995 (математика)
800
750
700
650
Продвинутый уровень
(625 баллов)
600
Средний результат по Росcии - 561
550
Высокий уровень
(550 баллов)
500
Средний уровень
(475 баллов)
450
400
350
300
250
1
11 21 31 41 51 61 71 81 91 101 111 121 131 141
Балл по математике по международной шкале
Балл по математике по международной шкале
800
750
700
Продвинутый уровень
(625 баллов)
650
600
Высокий уровень
(550 баллов)
Средний результат по Росcии - 549
550
Средний уровень
(475 баллов)
500
450
400
350
300
250
1
11
21
31
41
51
61
71
81
91
101
111
Распределение результатов ОУ в
исследовании TIMSS (1995, 2008) по уровням
достижений (физика)
TIMSS-1995 (физика)
750
750
700
700
650
Продвинутый уровень
(625 баллов)
600
550
Средний результат по Росcии - 521
500
Высокий уровень
(550 баллов)
Средний уровень
(475 баллов)
450
400
350
300
Балл по физике по международной шкале
Балл по физике по международной шкале
TIMSS-2008 (физика)
650
Продвинутый уровень
(625 баллов)
600
550
Средний результат по Росcии - 546
500
Средний уровень
(475 баллов)
450
400
350
300
250
1
11 21 31 41 51 61 71 81 91 101 111 121 131 141
Высокий уровень
(550 баллов)
250
1
4
7 10 13 16 19 22 25 28 31 34 37 40 43 46 49 52 55 58 61 64 67 70 73 76 79 82
Спасибо за внимание!
Вопросы, комментарии
Галина Сергеевна Ковалева
Институт содержания и методов обучения, РАО
Тел./факс: 8(499)-246-24-21
e-mail: centeroko@mail.ru
сайт: http://www. centeroko.ru