SAM (Student Achievement Monitoring)

SAM
(Student Achievement Monitoring)
Структурный подход
к оценке
образовательных результатов
Петр Геннадьевич Нежнов
13-14 апреля 2015
===
1.Диагностика учебной успешности в начальной школе //
Ред. П.Г.Нежнов, И.Д.Фрумин, Б.И.Хасан, Б.Д.Эльконин.
М.: ОИРО, 2009.
2.Нежнов П.Г., Карданова Е.Ю., Эльконин Б.Д. Оценка
результатов школьного образования: структурный
подход // «Вопросы образования», 2011, №1. с. 26-43.
3.Нежнов П.Г., Карданова Е.Ю., Рябинина Л.А.
Исследование
процесса
присвоения
учебного
содержания «Вопросы образования», 2013, № 4, с. 168187.
4.Nezhnov P. SAM – Toolkit to assess primary students’
academic achievements / CADMO, anno XIX, 1, 2011.
5.Nezhnov P., Kardanova E., Vasilyeva M., Ludlow L.
Operationalizing Levels of Academic Mastery Based on
Vygotsky’s Theory: The Study of Mathematical Knowledge
/ Educational and Psychological Measurement 2015, Vol.
75(2) 235–259
The Definition and Selection
of key Competencies
(DeSeCo)
Использовать средства
Взаимодействовать
в контексте взаимодействий в гетерогенных
(язык, технологии)
группах
Действовать
автономно
Рефлексивно овладевать культурными средствами действия, чтобы
продуктивно участвовать в жизни общества
и развивать свою идентичность
Категории целей
Категория 1:
(орудий)
Интерактивное использование
средств
1-А. Способность интерактивно использовать язык, символы и
текст
1-В. Способность интерактивно использовать знания и информацию
1-С. Способность интерактивно использовать новые технологии
(информационные, коммуникационные)
Категория 2:
Взаимодействие в гетерогенных группах
2-А. Способность хорошо относиться к другим
2-В. Способность действовать в кооперации
2-С. Способность регулировать и разрешать конфликты
Категория 3:
Автономное действие
3-А. Способность действовать, удерживая крупный план (предельный
контекст)
3-В. Способность намечать и реализовывать жизненные планы и личные
проекты
3-С. Способность защищать и утверждать права, ограничения, интересы
и потребности
Два основания оценки результатов
обучения:
• Измерение
• Категоризация
Приоритет измерения
(TIMSS)
Результаты измерения на
метрической шкале : сравнительная
оценка
1000
Боря
Петя
Маша
Саша
0
Разметка метрической шкалы
(TIMSS) : уровневая оценка
1000
Боря
Петя
Маша
Саша
Продвинутый – 625 баллов
Высокий – 550 баллов
Средний – 475 баллов
Низкий – 400 баллов
0
Презентация результатов тестирования
Вопросы для обсуждения
•Какие психолого-педагогические установки и
положения лежат в основе метрического
подхода к оценке образовательных результатов?
•Каковы плюсы и минусы этого подхода?
•Как могут воспользоваться итогами измерения
учебных результатов: а) органы управления
образованием; б) школа (директор, учитель,
ученик, родитель); в) исследователь ?
Приоритет категоризации
Категоризация результатов
обучения в рамках таксономии
образовательных целей
Перенос
Боря
Простейшие умения и
навыки
Петя Понимание
Маша Запоминание
Саша Различение
Средства категоризации:
таксономии педагогических целей
Б.Блум
В.Симонов
И.Лернер
TIMSS
(математика)
Различение
Знание
Запоминание Знание
Знание
Понимание Понимание
Применение Простейшие Применение Применение
умения и
навыки
Анализ
Перенос
Рассуждения
Синтез
Творческое
применение
Оценка
«… Педагогика, занимаясь становлением
знаний личности, не может интересоваться
только следствиями усвоения, игнорируя
процесс усвоения, т.е. самую деятельность
усвоения, которая имеет свои этапы, а каждый
этап – свой уровень усвоения знаний»
«… При любой организации обучения новому
учебному материалу, учащийся проходит три
этапа его усвоения. Соответственно можно
говорить о трех уровнях усвоения»
Лернер И.Я.
Модель функционального развития
(по Л.С.Выготскому)
Функциональный уровень
Свободное действие - ориентация на поле
и границы возможностей способа
действия
Рефлексивный уровень
Действие с пониманием - ориентация на
существенное отношение как основу
способа действия
Формальный уровень
Действие по образцу - ориентация на его
внешние характеристики
Пройденная учебная программа
Зона
ближайшего
развития
Действие формального уровня
Задачная
ситуация
Готовая схема
или образец
решения
Действие рефлексивного уровня
Задачная
ситуация
Схема
решения
Внутренняя
структура задачной
ситуации
Действие функционального
уровня
Содержание тестирования
(математика/начальная школа)
Разделы
содержания
Средства ориентировки
математических действий
Числа и вычисления
последовательность натуральных чисел; числовая прямая;
позиционный принцип; свойства арифметических действий;
порядок действий
Измерение величин
отношение между числом, величиной и единицей;
отношение «целого и частей»;
формула площади прямоугольника
Закономерности
«индукционный шаг»; повторяемость (периодичность)
Зависимости
отношения между однородными величинами (равенство,
неравенство, кратности, разностное, «целого и частей»);
прямая пропорциональная зависимость между величинами;
производные величины: скорость, производительность труда
и др.; соотношения между единицами
Элементы геометрии
форма и другие свойства фигур (основные виды
геометрических фигур); пространственные отношения
между фигурами; симметрия
Устройство тестов SAM
Блок задач (измерение величин)
I. Сколько квадратных сантиметров составляет площадь прямоугольника ABCD?
В
C
1 см2
А
D
II. Измерь площадь заштрихованной фигуры на рис.1, используя в качестве единицы
измерения площадь фигуры на рис. 2. Запиши получившееся число.
Рис. 1
Рис. 2
III. Измерь площадь большого треугольника, используя в качестве единицы измерения
площадь маленького треугольника. Запиши получившееся число.
Какое получится число, если 10472 разделить на 34?
Ответ: __________
Рассеянный Петя, переписал из учебника пример на
умножение двух чисел. Первый множитель он записал
правильно: 7.
А во втором множителе по ошибке переставил местами
цифры.
Из-за этого в ответе у него получилось число 147.
Какой ответ должен был получить Петя, если бы он
правильно переписал пример?
Ответ: __________
Какой самый большой результат может получиться,
если в выражении AB5 + BС2 заменить буквы цифрами
?
(разные буквы заменяются разными цифрами)
Ответ: __________
Распределение коэффициентов
решаемости (математика)
Индивидуальный профиль
достижений учащегося
по некоторому предмету
100
90
Решаемость (%)
80
70
60
50
40
30
20
10
0
1 уровень
2 уровень
3 уровень
Выполнение теста по математике
учащимися разных классов
100
90
Решаемость (%)
80
70
60
10 классы
50
8 классы
40
6 классы
30
4 классы
20
10
0
1 уровень
2 уровень
3 уровень
Профили выполнения теста по
математике
учащимися 4-го класса
100
90
Решаемость (%)
80
70
60
50
40
30
20
10
0
1 уровень
2 уровень
3 уровень
Вопросы для обсуждения
•Какие психолого-педагогические
установки лежат в основе
категориального подхода к оценке
образовательных результатов?
•Каковы плюсы и минусы этого подхода?
•Как могут воспользоваться итогами
измерения учебных результатов субъекты
образовательной системы?
SAM
синтез измерения и
категоризации
Ступени освоения содержания
Первая ступень: учащийся решает не
менее 50% заданий 1-го уровня
Вторая ступень: учащийся решает не
менее 50% заданий 2-го уровня
Третья ступень: учащийся решает не
менее 50% заданий 3-го уровня
Пороги ступеней на 1000-балльной шкале
(математика)
Ступень 1 – 430 баллов
Ступень 2 – 500 баллов
Ступень 3 – 570 баллов
Шкала с разметкой уровней по
модели SAM
1000
Боря
Петя
Маша
Саша
Функциональный
Рефлексивный
Формальный
0
Распределение учащихся 4-х классов
школы № ** по уровням SAM
(математика)
Распределение по ступеням
(математика, 50%-ный критерий)
Распределение по ступеням
(математика, 70%-ный критерий)
Нормативные ориентиры оценки
результатов тестирования
•Среднее значение по генеральной выборке
•Социокультурная норма (среднее значение по
выборке школ лидеров)
•Абсолютная культурная норма (стопроцентное
выполнение теста)
•Теоретически намеченная возрастная норма
конца начальной школы (рефлексивный
уровень по SAM)
Проблемы, которые SAM помогает
решить:
o Общее понимание образовательных целей
учителями, администрацией, учащимися
o Выявление Зоны Ближайшего Развития учащихся
для выбора индивидуализированной
педагогической стратегии
o Преодоление затруднений в освоении умений
высокого порядка (нацеленность на освоение
ключевых понятий)
o Мотивация обучения
o Повышение квалификации учителей
o Оценка академической успешности
o Самооценка успешности работы учителями
Спасибо за внимание!