Знаменская О.В., Скрипка А.М. Анализ результатов «Дельта

Семинар
«Оценка индивидуального прогресса школьников: подходы и инструменты»
24-25 апреля 2012 года, г. Красноярск
Анализ результатов «Дельта-тестирования»:
типы данных. Формы предъявления
результатов мониторинга
Знаменская Оксана Витальевна
к.физ-матем. н., доцент СФУ, руководитель группы ИППР по разработке
диагностических материалов на материале математики основной школы
Скрипка Анна Михайловна
к.пед. н., с.н.с. КК ИПКиПП РО,
руководитель информационно-аналитического отдела ЦОКО
Общая характеристика инструментария
«Дельта»
Тест «Дельта» – это инструментарий для диагностики индивидуального
прогресса учащихся в освоении учебных предметов «русский язык» и
«математика».
Прогресс в мышлении и понимании означает переход школьника с
одного уровня владения предметным средством на другой, более высокий:
первый уровень – освоение общего смысла и формы действия
второй уровень – освоение существенного основания способа действия
третий уровень – функционализация способа действия
Общая характеристика инструментария
«Дельта»
Диагностируется не статическое состояние, а изменение,
динамика. О положительной индивидуальной динамике
учащихся можно говорить, когда:
Уровневый
прогресс
Линейное
приращен
ие
• происходит переход от более низкого к более высокому
уровню в освоении предмета
• происходит увеличение количества правильно выполненных
заданий данного уровня в рамках одного среза
Задачи диагностических срезов
Задача первого среза – зафиксировать стартовую точку
для определения индивидуального прогресса школьников в
освоении учебных предметов.
Задача второго и последующих срезов – определить
характер изменений в уровне владения предметными
средствами, произошедших с конкретным учеником за
промежуток между срезами (уровневый прогресс и
линейное приращение).
Основные показатели характера
продвижения в освоении предмета
срезовые (на каждом срезе)
для каждого
учащегося
показанный уровень, актуальный
уровень, индивидуальный профиль
динамические
Показатели
динамический профиль, дельта
«Дельты»
дополнительные
рейтинг
для
тестируемых
классов
срезовые
процент распределения учащихся по
срезовым показателям
Основные показатели характера
продвижения ученика в освоении предмета
Показанный уровень
Тестовые материалы для каждого среза содержат задания 1, 2 и 3
уровней. По результатам выполнения одного диагностического среза
определяется, сколько процентов заданий 1, 2 и 3 уровней правильно
выполнил учащийся. На основании этих данных учащемуся назначается
уровень, называемый далее «уровень, показанный учащимся на данном
срезе» или показанный уровень.
Для определения уровневого прогресса учащегося достаточно знать
показанный им уровень на каждом срезе, т.о. показанный уровень –
это основной тип данных, определяемых при Дельта-тестировании.
Основные показатели характера
продвижения ученика в освоении предмета
Индивидуальный профиль учащегося
Для более детального анализа продвижения школьника в изучении
предмета используются данные о процентах правильно выполненных
учащимся заданий 1, 2 и 3 уровней. Для анализа удобно представлять эти
данные графически в виде диаграммы, называемой индивидуальный
профиль учащегося.
Пример индивидуальных профилей
учащегося после 1, 2 и 3 срезов
Основные показатели характера
продвижения ученика в освоении предмета
«Дельта» и динамический профиль
Дельта. Отражает характер прироста в мышлении и понимании
ученика при изучении данного предмета. Фиксирует разницу между
показанным на текущем срезе У2 и предыдущем срезе У1 уровнями. Если
величина У2-У1 положительная, то за время тестирования прирост
получен. Если ноль, то учащийся демонстрирует стабильный уровень
(возможно, высокий).
Изменения в процентах решенных учеником задач от среза к срезу
удобно представлять в наглядной форме в виде динамического
профиля учащегося.
Пример динамического профиля
учащегося после 2 и после 3 срезов
Основные показатели характера
продвижения ученика в освоении предмета
показанный уровень
Срез 1
Срез 2
Срез 3
после
после
после
среза 1
среза 2
среза 3
дельта
актуальный уровень
по
по
срезам
срезам
1и2
2и3
по срезам
по срезам
1и2
2и3
Форма представления показателей характера
продвижения ученика в освоении предмета
Дополнительный показатель:
рейтинг учащегося
Рейтинг учащегося позволяет
фиксировать линейное приращение, а
также изменения «положения»
результатов учащегося относительно
его результатов на предыдущих срезах
и относительно результатов других
учеников
По результатам каждых двух срезов могут
быть получены ответы на вопросы:
√
• какой уровень мышления и понимания учащийся устойчиво
демонстрирует на обоих срезах (актуальный уровень) и какой
уровень находится в стадии освоения (осваиваемый уровень)
√
• каков характер продвижения ученика в овладении
предметным средством, какой прирост произошел у данного
конкретного ученика за время тестирования (дельта)
√
• каков прогноз индивидуального прогресса, т.е. перехода
учащегося на следующий уровень (прогноз дельты)
Лист индивидуальных результатов (пример)
Показатели характера продвижения
класса в освоении предмета
По результатам каждого среза
Чтобы получить представление о ситуации в классах в целом, для
каждого тестируемого класса вычисляется процентное распределение
учащихся по показанным ими уровням.
Более точно, для каждого среза вычисляются проценты учащихся класса,
имеющих по результатам среза данный показанный уровень от числа
учащихся класса, тестируемых на этом срезе.
Такие данные удобно представлять в виде диаграммы, называемой
профиль класса «Показанный уровень».
Показатели характера продвижения
класса в освоении предмета
По результатам 2, 3 и далее срезов
Для каждого тестируемого класса вычисляется процентное
распределение учащихся по актуальным уровням.
Такие данные удобно представлять в виде диаграммы, называемой
профиль класса «Актуальный уровень»
Для каждого тестируемого класса вычисляется процентное
распределение учащихся по дельте. Проценты вычисляются от числа
учащихся, выполнявших два (этот и предыдущий) среза. Полученные
данные представляются в виде диаграммы «Дельта-шаг»,
характеризующей прирост учащихся класса в мышлении и понимании
при изучении предмета.
Показатели характера продвижения
класса в освоении предмета
Срез 1
Срез 2
Срез 3
Распределения учащихся
Распределения
Распределения
класса по показанным
учащихся по
учащихся по
уровням
«дельте»
актуальным уровням
после
после
после
среза 1
среза 2
среза 3
по
по
срезам
срезам
1и2
2и3
по срезам по срезам
1и2
2и3
Форма представления
показателей для класса
Форма представления показателей для
класса (профиль класса)
АКТУАЛЬНЫЙ УРОВЕНЬ ПОСЛЕ 2 СРЕЗА
ПОКАЗАННЫЙ УРОВЕНЬ НА 2 СРЕЗЕ
6-7 "А"
6-7 "А"
6-7 "Б"
6-7 "В"
60.0%
6-7 "Б"
90.0%
6-7 "В"
80.0%
70.0%
50.0%
60.0%
40.0%
50.0%
30.0%
40.0%
20.0%
30.0%
10.0%
20.0%
10.0%
0.0%
0 уровень
1 уровень
2 уровень
0.0%
0…
1…
2…
3 уровень
6-7 "А"
6-7 "Б"
6-7 "В"
3…
6-7 "В"
6-7 "А" 6-7 "Б"
По результатам каждых двух срезов могут
быть получены ответы на вопросы:
√
• каково процентное распределение учащихся по уровням
мышления и понимания в каждом классе (профили класса
«Показанный уровень», «Актуальный уровень»)
√
• каковы прогнозы перехода на следующий уровень по классу в
целом
√
• каков прирост в мышлении и понимании по классу в целом
(диаграмма «Дельта-шаг»)
√
• существуют ли значимые различия между разными классами
по этим показателям
Программные средства
В графическом виде
индивидуальные результаты
учащихся представляет
программа «DELTA-1»:
- профиль учащегося
- динамический профиль учащегося
- рейтинг
- лист индивидуальных результатов
диагностики «Дельта»
Программные средства
Электронные таблицы MS Excel. В них заносятся первичные данные по результатам
выполнения тестовых заданий. Из них данные импортируются в программу «DELTA-1».
В электронных таблицах формируются таблицы с индивидуальными результатами
(показанный уровень, актуальный уровень, дельта) учащихся класса, строятся профили
классов и параллели.
данные для построения профиля
уровни: показанный, актуальный, дельта
актуальный актуальный
уровень
уровень
дельта дельта
№ Ф.И. ребенка
после 2
после 3
после 2 после 3
1 срез 2 срез 3 срез
среза
среза
среза
среза
1
2
3
Иванов Петр
Сидорова
Дарья
0
3
2
2
Петров Иван
0
2
3
0
3
0
1 срез 2 срез 3 срез
3
0->3
360 317
216 204
2
3
рейтинг
2
0->2
2->3
3
216 336
1 срез
2 срез
3 срез
1 ур 2 ур 3 ур 1 ур 2 ур 3 ур 1 ур 2 ур 3 ур
23% 14% 8% 91% 68% 46% 59% 45% 46%
45% 45% 23% 55% 45% 0%
23% 14% 8% 45% 45% 23% 59% 64% 46%
СПАСИБО ЗА ВНИМАНИЕ!
Знаменская О.В. OVZnamenskaya@sfu-kras.ru
Скрипка А.М.
rtc.imerae@gmail.com
kripka@mail.ru
WWW.RTC-EDU.RU