"Оценивание как результат и результаты оценивания".

«Оценивание как результат и результаты
оценивания»
Анатолий Каспржак, Рига, 2011
Вчера сначала мы задали вопрос:

Почему наши отличники так часто
бывают не столь успешны в жизни?

Почему из двух, примерно одинаково
знающих иностранный язык граждан,
один договаривается с иностранцем, а
второй нет?

Правомерно ли нищему российскому
(латышскому) интеллектуалу смеяться
над неосведомленностью, серостью
преуспевающего американца?
2
Под компетентностью будем понимать способность
результативно действовать в нестандартных ситуациях
(рабочее определение)
«Нестандартными» давайте считать те учебные ситуации, которые не могут
быть решены только за счет формальной выученности, наученности
Модернизированная схема Г. Цукерман
Способности
Знания и Умения –
Интеллектуальные;
Предметные;
Общие.
Ресурс личности,
позволяющий разрешить проблему
(персональная компетентность
студента)
3
Перечислим, кратко, те дефициты, которые
обнаружились у российских школьников в исследовании
PISA (2000 - 2003)
У наших школьников:

Не сформированы различные типы чтения (работа с информацией,
представленной в неявном виде, форме таблиц, реконструкция
разных точек зрения и т.д. Они работают с «приготовленными»
текстами);

Отсутствует учебная самостоятельность, присутствует установка на
стереотип (например: не могут самостоятельно установить
требуемый уровень точности ответа, на используется личный
опыт, тест как проблема);

Нет потребность решить проблему, но не задачу (предметы –
сигналы; подсчитать – применить формулу, объяснить что-то комуто).
4
Одним словом, результативность современной
постсоветской школы моно представить примерно так:
З
УН
Российская школа
«выдает» ученика
информированного, но
мало что умеющего,
«избегающего
неопределенностей»,
наполняющих
реальную жизнь….
5
В то время, как результат пребывания в школе
национального нарицательного образа:
Выражается несколько
другой «формулой» -
З
У
Н
6
«Обучение» и «образование»: современный
взгляд (по книге Ивана Иллича «Освобождение от школ»)
Обучение –
инструмент, дающий
человеку возможность
накопить «фонд знаний»,
подобно тому, как бизнес
позволяет ему
аккумулировать
капитальные фонды….
Образование –
процесс свободного
определения каждым
учащимся своего
собственного места в жизни
и обучении, то есть того
места, которое знание
должно занять в его жизни….
ИТАК:
В современной школе, должна быть ярко выражена
образовательная «доминанта»
7
Обучение (учение) через реконструкцию опыта
Джон Дьюи
Ощущение
затруднения
Осознание
проблемы
Критическое
осмысление
проблемы
Выдвижение
гипотезы
Проверка
гипотезы
(действие)
8
Обучение через опыт (цикл Колба)
Дэвид
Колб
1.Непосредственный опыт
4. Экспериментирование
2.Наблюдение и
рефлексия
3. Формирование абстрактных
моделей и концепций
9
ЧЕМУ МЕНЯ НАУЧИЛА ШКОЛА?
Состав когорты 2007-2009 (учатся у нас два года) выглядит так. Средний возраст – 36,5 лет; 87% женщины, 13% - мужчины; 60% - замужем или женаты, на одного человека приходиться 0,8 ребенка.
Это – школьные учителя, желающие стать управленцами – 23%; школьные администраторы – 37%;
специалисты региональных и муниципальных управлений образования – 23%; работники системы
высшего образования – 17%. Средний стаж педагогической работы составляет 11,8 года.
Ничему. Для меня это был
исторический факт
Писать, читать и считать
14%
Преодолевать трудности, выживать,
приспосабливаться, не быть самим
собой, противостоять обществу
20%
23%
33%
10%
Общению
Объяснила, что некоторые вещи я
сделать никогда не смогу, привила
стойкое отвращение к чтению,
математике и т.д.
10
«Школа как средство образования была для меня
просто пустым местом» Чарльз Дарвин.
11
«В нашем мире есть только два заведения, где главным фактором
является срок, а не проделанная работа, - это школа и тюрьма. В
других местах важна работа, а не то, сколько на нее ушло времени»
Уильям Глассер, слова учителя.
12
«Из всего, что предназначается на земле для людей
невинных, самое ужасное – это школа». Бернард Шоу.
13
«Я думаю, что детей лучше топить,
чем заключать в современные
школы»
Мария Кюри.
14
«И, несмотря на все наши усилия, дети все-таки
чему-то учатся». В.В. Давыдов.
15
Так что же является подлинным результатом
школьного образования? Как связаны эти
результаты с формальным и скрытым учебным
планом? И, что, на мой взгляд, главное: «Что
собственно сегодня является
предметом
оценивания и как этот способ влияет на
результаты и эффекты работы школы как
института?».
Именно об этом я попробую
рассуждать сегодня.
16
Мозг хорошо устроенный,
стоит больше,
чем мозг хорошо наполненный.
М. Монтень
Часть вторая
О ТОМ, КАК ИЗМЕРИТЕЛЬ ОПРЕДЕЛИЛ
СОДЕРЖАНИЕ ОБРАЗОВАНИЯ И
ДОМИНИРУЮЩИЕ ВИДЫ УЧЕБНОЙ
ДЕЯТЕЛЬНОСТИ И, В КОНЕЧНОМ СЧЕТЕ –
ПЛАНИРУЕМЫЙ РЕЗУЛЬТАТ
17
Традиционная школа, будучи не способна оценить
образовательный эффект, который и является подлинным
результатом образования, ориентируется на то, что умеет
измерять, то есть – результаты формального научения.
18
КТО, КАК и ЧТО
оценивает сегодня в школе?
1.
2.
Учитель методом
экспертной оценки
оценивает
разрозненные (не
систематизированн
ые) учебные
достижения
школьников.
Отчуждаемые
продукты
(формально и не
формально)
19
Профессиональная компетентность
баскетболиста в «различных логиках»
Хороший баскетболист в
«знаниевой» логике
(студент)–
1.
1.
2.
3.
4.
Знает как надо добывать
2.
очки путем бросания мячом в
кольцо.
Понимает, когда и как надо 3.
бросить мяч.
Знает и понимает стандарт 4.
профессиональной игры;
Изучил и попробовал на себе
способы совершенствования
профессиональных навыков
Хороший баскетболист в
логике компетентностного
подхода (молодой человек) –
Получает очки путем
попадания мячом в кольцо.
Умеет выбрать нужный прием
для достижения желаемого
результата.
Вписывается в стандарт
профессиональной игры.
Работает над
совершенствованием
профессиональных навыков.
20
КТО КРАШЕ? ИЛИ – ДЕЙСТВИТЕЛЬНО ЛИ МАТЕМАТИКА
УМ В ПОРЯДОК ПРИВОДИТ….‽
Сравнение (пример) 1
‽ ‽
21
КТО КРАШЕ? ИЛИ – ДЕЙСТВИТЕЛЬНО ЛИ МАТЕМАТИКА
УМ В ПОРЯДОК ПРИВОДИТ….‽
Сравнение (пример) 2
‽ ‽
22
Акцентировав оценочную деятельность на знаниях и
умениях, мы понуждаем человека развивать у себя
именно эту свою ресурсную часть….
23
ЧАСТЬ ТРЕТЬЯ
«…Оценка – это тот узел, тот перекресток, на котором встречаются все
участники школьной жизни: дети, их родители, учителя, администрация…».
И. Улановская, Г. Цукерман, Е. Юдина.
Модернизация образовательного процесса в начальной, основной и старшей школе: варианты
решения. Рекомендации для организации опытно-экспериментальной работы. / А. Каспржак, Л.
Иванова, К. Митрофанов и др. – М. : Просвещение, 2004
Попробуем ответить на вопрос: «ЧТО, КАК и
ЗАЧЕМ «из учебных достижений школьника»
оценивают сегодня учителя в классе?
24
Как это соотносится с существующими
видами оценивания

Оценивание с целью присвоения квалификации. Экзамен на
подтверждение квалификации («вынесен» за пределы
рассмотрения).

Селективное оценивание (отбор, тест способностей и/или
достижений). Образовательный и профессиональный отбор.
переводные экзамены и т.д.

Образовательное оценивание относительно результата
(формирующее оценивание). Повышение качества образования
посредствам систематического диагностирования.
25
25
Функции оценивания
Проинформировать (обратная связь со
всеми участниками процесса)
 Стимулировать (повысить самооценку)
 Сравнить (с собой, с другими)
 Научить оценивать себя

26
Я
очень
напрягаюсь, когда
выполняю
домашние задания
Я беспокоюсь, что
получу
плохие
оценки
РФ
Среднее
международн
ое
39
29
К. Поливанова (еще одно
72
59
возвращение к прошлому
году): «Домашнее задание
дается учителем не для
того, чтобы
стимулировать учебную
активность школьника, а
для того, чтобы его
ПРОКОНРОЛИРОВАТЬ».
27
Показатель
Я напрягаюсь, когда мне приходится выполнять
домашние задания
Я беспокоюсь, что получу плохие оценки
Я так часто решаю некоторые задания по математике, что
чувствую, что могу решить их даже во сне
Когда я решаю задачи, я часто стараюсь найти новый
способ решения
На уроках шум и беспорядок
Преподавателю приходится долго ждать, пока учащиеся
успокоятся
Учащиеся долго не приступают к работе после начала
урока
Преподаватель дает учащимся высказать свою точку
зрения
Я думаю о том, как может быть использована математика
в повседневной жизни
Когда я занимаюсь математикой, я стараюсь установить
связи между изучаемым материалом и тем, что выучил по
другим предметам
Я чувствую себя частью коллектива
Мне кажется, что я нравлюсь тем с кем учусь
Школа научила мена принимать решения
РФ
Средне
е
39
72
29
59
24
34
31
16
49
36
18
32
15
29
71
59
67
53
56
92
51
86
44
81
86
53
Выводы
Ученики все
время пишут
контрольные
Основной
принцип –
зубрежка и
дрессура
Жесткая
дисциплина;
b. Отсутствуют
«шумные»
виды работ
Самое страшное –
это считается
нормой и
«свободой»
Отвечаем на
вопрос не как
думаем, а как
должно быть
(принцип «У-2»)
a.
Внутренняя
противоречивость
!!!???
28
Не имея ресурсов для того, чтобы осуществлять мониторинг
учебных достижений школьников в классе (осуществлять
образовательное, формирующее оценивание), учителя
подменяют его селективным оцениванием. Это ведет к:



Пересмотру (подмене) целей образования. Задача отдельной
личности не решается, производится, как говорил Г.П.
Щедровицкий, фиктивно демонстративный продукт;
Узакониванию феодальных отношений в классе и школе в
целом. Школьник неминуемо попадает в «пристройку снизу»,
более того – эта становиться для значительной части
выпускников не только нормой, но и потребностью;
Массовому блокированию интерактивных методов обучения,
тех, которые ориентированы на создание условий для
формирования у учеников школ ключевых компетентностей.
29
ЧАСТЬ ЧЕТВЕРТАЯ –
ЧТО ДЕЛАТЬ?
30
Работу по преодолению стереотипа вели
педагоги и психологи
Обе группы исходили из
того, что –
эффективность школьной
отметки зависит, прежде
всего, от того, в какой
степени ученик сможет
интерпретировать
оценку, закодированную
в виде символа (отметки)
Выводы педагогов и психологов
1.
Если критерии оценивания становились «открытыми», не
менялись от урока к уроку, школьник перестает быть объектом и
становится субъектом образовательного процесса. Отметка же
перестает быть средством опосредованного управления и
манипулирования учеником.
2.
Различные школы могут использовать различные критерии
оценивания одних и тех же работ, исходя из специфики
конкретной школы (решаемых ей задач). Незыблемыми должны
оставаться лишь принципы:
•
Оценка накапливается. Тройка – это оценка (поощрение) за
сделанное, а не наказание;
•
Шкала оценивания многобальная, отличная оценка ставиться не за
все выполненное, а за определенную часть.
•
Качество оценочной схемы определяется ее возможностью в плане
исключения субъективизма. Это могло достигаться за счет самой
схемы оценивания, так и их сочетания. Например: учитель + школа +
самооценка + взаимооценка.
Чтобы я на месте директора школы начал делать
уже сегодня?
1.
Создал службу мониторинга (внешне оценивание не выручает);
2.
Демпфировал ориентацию контроля на «знаниевую» сторону образования
за счет введения внешнего текущего и итогового контроля, направленного
на обеспечение личностного роста ученика, его самореализации по
отношению к образовательным областям. Это надо делать на уровне
Федерации и региона, но, можно делать и на уровне школы.
3.
Сделал открытыми для всех субъектов образовательного процесса (прежде
всего – учителей, учеников и их родителей) критерии и схемы (процедуры)
оценивания (подчиненность и одконтрольность). Это не только снимет
нервозность (первопричина тревожности), но и позволит нормативно
закрепить:
•Дифференциацию оценки относительно типа работ (что-то может,
например оцениваться по системе «зачет-незачет», по самому факту
участия в этой работе и т.д.). То есть, ввести и закрепить в школе
уровневый подход, перейти.
•Дифференциацию оценки относительно ее субъекта (введение
партфолио, например, который состоит из внешней (учительской)
оценки, самооценки, взамиооценки и т.д.).
ПОРАБОТАЕМ С
ОЦЕНКОЙ
ПРАКТИЧЕСКИ
34
Изучив задание попробуем ответить на следующие
вопросы:
1.
2.
3.
Для чего может быть дана такая работа
(диагностика, стимуляция, коррекция, развитие)?
Понимая, что конечной целью оценивания
является ответ на вопрос: «Как дальше улучшить
свою деятельность?», понять – кому он (этот
вопрос) адресован.
Попытаться ответить на вопрос: «Зачем мы будем
эту работу оценивать, чего и от кого (каждого
ученика, класса в целом) хотим добиться, какого
результата достичь?
35
ЗАЧЕМ МЫ ОЦЕНИВАЕМ?

Для улучшения успехов тех, кого оцениваем;

Для улучшения механизмов оценивания;

Для улучшения методов, средств и стратегий оценивания;

Для сертификации уровня знаний и основных навыков учащихся по завершении
ступеней образования.

Для организации отбора;

Для изучения успехов и прогресса;

Для исправления результатов;

Для формирования навыков самооценки;

Для выявления недостатков или дисфункций и выработки правильной стратегии;

Для изучения исходной стадии и прогнозирования дальнейших действий.

Для оптимизации полученных результатов в преподавании, обучении
и оценивании;

Для выработки корректирующих прогрессивных программ в случае
неудовлетворительных результатов.
36
И, наконец –
Как мы оцениваем? Каков механизм
оценивания? По каким критериям и
шкале мы оцениваем? Помним, что это
связано с задачей (функцией)
оценивания.
5. Как и кому представляем (предъявляем,
обнародуем) результат?
4.
37
Как мы оцениваем? Каков механизм оценивания?
Предполагаемые цели/результаты обучения в данном модуле
Интеллектуальные
Анализировать и критически оценивать теоретические и практические работы в данной
области благодаря приобретенным навыкам критического рассмотрения исследований в области
образовательной политики и менеджмента;
Уверенно применять модели и концепции управления изменениями к себе и своим
организациям;
Осмысливать собственную практику, а также связь теории и практики в данной области;
Интерпретировать и применять данные и результаты социальных исследований при разработке
политики и в практике управления.
Развить свои способности к письменной коммуникации применительно к широкому спектру
академических и профессиональных задач;
Приобрести и отработать навыки разработки проектов и управления ими;
Практические
Приобрести навыки разработки и управления проектами, связанными с проведением
социальных исследований и практическими микроисследования, а также осуществление
развернутых исследований по выбранным темам.
ШКОЛА: Предметные + Интеллектуальные + Общие
38
РАЗРАБОТЧИКИ ОЦЕНОЧНОГО ЛИСТА

Не должны
избегать
употреблять
описательные
глаголы, такие
как:
◦
◦
◦
◦
«понимать»;
«знать»;
«осознавать»;
«разбираться в…»….

Стремиться
использовать
такие конкретные
глаголы как:
◦ «быть способным
определять»;
◦ «уметь применять»;
◦ «уметь
анализировать»
◦ «быть знакомым
с…»….
Типичная ошибка при описании образовательных
результатов: при их описании говорят об обучении, а
не о представлении (предъявлении) изученного.
39
По каким критериям и шкале мы оцениваем?
Достижение планируемых результатов обучения
Комментарии:
A
B
C
D
E
35%
Актуальность, значимость исследования (работы)
Качество, самостоятельность анализа,
убедительность аргументации
Комментарии:
Диапазон используемой литературы, источников,
качество ссылок
Комментарии:
A
B
C
D
E
25%
A
B
C
D
E 10%
Практическая значимость работы
Комментарии:
A
B
C
D
E 20 %
Организация, структура работы
Комментарии:
A
B
C
D
E 5%
Общие умения и навыки
(оформление, грамотность и т.д.)
Комментарии:
A
B
C
D
E 5%
40
А теперь попробуем выступить в роли экспертаоценщика
На вопрос экзаменатора: «Как пройти на Красную
площадь от Арбата?» Студент-первокурсник ИИЯ
ответил:
«Надо ходить в сторону площадь Арбат, потом все
время прямо от проспект Калинин и вы увидите
Кремль, а там налево через саду и вот будет
Красная площадь»
Попробуйте подумать и оценить этот ответ по 5балльной шкале и обоснуйте свою оценку.
41
Формирующая (суммирующая) оценка




Правильно понят вопрос- 2 балла
Ответ дает запрашиваемую информацию – 2
балла
Лексико-грамматическое оформление ответа не
приведет к коммуникативным сбоям-1 балл
Лексико-грамматическое оформление ответа
полностью соответствует нормам языка- (1)
балл
42
Еще одно задание

На автоответчике записано сообщение. Экзаменуемая
прослушала его и должна устно передать это сообщение
мужу.
Привет, Лариса,
Ты сегодня выглядывала в окно? Дождь, похоже,
ни на минуту не прекращается. Ну и ветер просто
сдувает с места. Я так расстроилась - похоже,
опять нашим планам сбыться не суждено. Давай
отменим нашу встречу в три часа. Скажи Алексею,
что - все равно вести детей в зоопарк не
получится, так что пусть не приезжает за мной. Но
мы обязательно должны встретиться, пока ты не
уехала. Прогноз на весь день плохой, но, может
быть, к вечеру хотя бы дождь стихнет, и мы
сходим вместе в кафе. До связи. Наташа.
43
Сейчас вы оцените, то, как Ларисе удалось передать
сообщение мужу. Ответ оценивается из 9 баллов.
Положительно оценивается ответ от 5 баллов:










До 5 баллов- не справился
5 баллов – удовлетворительно
6-7 баллов- хорошо
8-9 баллов- отлично
Критерии оценки:
Коммуникативное намерение реализовано- 5 баллов
Некоторые основные факты переданы верно-6 баллов
Все основные факты переданы верно- 7 баллов
Удалось передать и настроение (эмоции) автора текста- 8
баллов
Удалось правильно грамматически и лексически оформить
текст- 9 баллов
44
Ответ Ларисы

Звонила Наташа. Она очень
расстроилась - погода испортилась и
ветер дует и дождь. Наверное, вместо
зоопарка пойдем в кино. Нельзя не
увидеться - мы ведь скоро уезжаем.
45
Сейчас вы оцените, то, как Ларисе удалось передать
сообщение мужу. Ответ оценивается из 9 баллов.
Положительно оценивается ответ от 5 баллов:
 До 5 баллов- не справился
 5 баллов – удовлетворительно
 6-7баллов- хорошо
 8-9 баллов- отлично
Критерии оценки:
 Коммуникативное намерение реализовано- 5 баллов
 Некоторые основные факты переданы верно-6 баллов
 Все основные факты переданы верно- 7 баллов
 Удалось передать и настроение (эмоции) автора текста- 8
баллов
 Удалось правильно грамматически и лексически оформить
текст- 9 баллов
46
Обсудим еще раз: «Какие требования следует предъявить к
образовательным результатам современной школы?»
Предметные
Интеллектуальные - нахождение
информации, установление связей,
анализ и критическое осмысление
результата, интерпретация текста и
т.д.;
Общие - освоение типа, процедур
отношений – «скрытый учебный
план».
47
Традиционные задания позволяют:
Но не разделить «смыслы»
(математический и физический)
Приобрести предметные умения
I=U/R
R=U/I
I=U/R
К
С.В.
ЭЛ.
И, КАК СЛЕДСТВИЕ, НЕ РЕШИТЬ ЗАДАЧУ СОЗДАНИЯ УСЛОВИЙ ДЛЯ
САМООПРЕДЕЛЕНИЯ УЧЕНИКА ОТНОСИТЕЛЬНО ЕГО
ЖИЗНЕННОЙ ПЕРСПЕКТИВЫ
48
Возвратимся к исследованию PISA которое показало,
что «прогресса» не случиться, если не произойдет:

Переориентации школы на новые образовательные
результаты (новое качество образования);

Принципиально
не
измениться
содержание
образования, формы
работы учителя и ученика
(процессы учения и обучения);

Не изменится характер взаимоотношений между
субъектами образовательного процесса.
ВМЕСТО ЗАКЛЮЧЕНИЯ
49