1 Выбор метода оценки знаний по экономике В номерах 1’2005 и 2’2005 журнала «Экономика. Вопросы школьного экономического образования» шла речь об использовании педагогических технологий с целью повышения эффективности учебного процесса. Конструирование учебного процесса с учетом заданных исходных установок позволяет гарантировать достижение поставленных целей. Развитие и использование педагогических технологий способствует целенаправленному проектированию и изготовлению инструментария учебного процесса, апробации, отбору и накоплению наиболее эффективных методов обучения. Одним из заключительных этапов создания и реализации педагогической технологии является оценка достигнутых результатов обучения. Полученные результаты оценки, с одной стороны, позволяют судить о степени достижения поставленных образовательных целей, с другой стороны, являются основанием для внесения корректив в разработанную технологию с учетом полученных результатов. В данной статье мы постараемся обсудить следующие вопросы: Какие навыки учащихся учителя пытаются оценить? Какие цели преследует оценка прогресса школьников в изучении экономики? Какими характеристиками должен обладать хороший метод оценки? Какие методы можно использовать при оценивании? Насколько перечисленные методы обладают характеристиками хорошего метода оценки? Таксономия учебных задач применительно к оценке знаний Обсуждая оценку знаний по экономике, стоит хорошенько задуматься над вопросом - что именно учителя пытаются оценить? В прошлом тесты и экзамены делали неоправданно большой акцент на изучении и воспроизведении фактов. В последние годы, однако, появилось большее понимание необходимости формировать у учащихся навыки более высокого порядка. В статье «Технологический подход к организации и управлению учебным процессом», опубликованной в номере 1’2005 (c. 57 - 60) была приведена Таксономия учебных задач, которая используется педагогами, как при постановке учебных целей, так и при выборе методов оценки знаний учеников. Бенджамин Блум (Benjamin Bloom) и команда американских специалистов предприняли попытку классифицировать человеческие способности в их отношении к образованию в «Таксономии образовательных целей» (“Taxonomy of Educational Objectives”). Они разделили способности и научение на три сферы (domains): когнитивную, аффективную и психомоторную. Когнитивная сфера охватывает образовательные цели, касающиеся вызова из памяти и узнавания информации и развития интеллектуальных способностей и навыков. К аффективной сфере относятся цели, которые связаны с изменениями в интересах, позициях и ценностях и развитием способности их понимать. Психомоторная сфера включает моторные навыки. Последние, в том числе трудовые навыки и навыки чтения и речи, имеют значение для большинства школьных предметов. Каждая сфера делится на несколько крупных классов, которые ранжируются по степени возрастания сложности состава и функционирования. (Классы когнитивной сферы: знание, понимание, применение, анализ, синтез, оценка. Классы аффективной сферы: восприятие, реакция, приписывание значения, организация, ценностная характеристика). [1] Постановка адекватных целей, с точки зрения Блума, фундаментальна для оценки знаний и необходима для эффективного преподавания и оценки. Несмотря на то, что приведенная классификация не является четкой, она может быть использована учителями. Обычно это означает, что надо перейти от узкого преподавания фактов к конструированию обновленной программы, основанной на осознании многомерности образования и признания, что экономика 2 помимо всего прочего, формирует навыки, концептуальное знание, понимание, ценностные позиции и другие составляющие когнитивной и аффективной сферы. Схема Гронлунда Для иллюстрации таксономического подхода можно использовать схему Гронлунда (Gronlund), приложенную к конкретной теме из курса экономики. Учителя, которых привлекают учебные ситуации с более открытым исходом, не отнесутся к таксономическому подходу с симпатией. Некоторые из них будут утверждать, что не могут и не намерены пытаться предсказывать, чему сумеют научиться школьники, с которыми они работают. Но, возможно, есть смысл очертить спектр способностей, который поддается стимулированию, и указать на существование диагностических процедур, позволяющих идентифицировать и измерять учебные результаты отдельных школьников в целях поощрения умения рационально и критически мыслить. Именно в этом отношении таксономический подход наиболее целесообразен. Приводимый ниже контрольный список по Гронлунду не следует рассматривать как исчерпывающий. Он приводится главным образом для того, чтобы продемонстрировать сам метод постановки образовательных целей для нужд оценки знаний. Контрольный список результатов изучения темы из курса экономики 1. Знание основных терминов 1.1 Связывает термины, имеющие одинаковое значение 1.2 Выбирает термин, наилучшим образом соответствующий предложенному определению 1.3 Идентифицирует термины, использованные при обсуждении тех или иных экономических проблем 1.4 Корректно использует термины при описании экономических проблем 2. Понимание экономических концепций и принципов 2.1 Идентифицирует примеры экономических понятий и принципов 2.2 Описывает экономические понятия и принципы своими словами 2.3 Показывает взаимосвязь экономических принципов 2.4 Объясняет изменения в экономических условиях, используя концептуальный аппарат и принципы экономики 3. Приложение экономических принципов к новым ситуациям 3.1 Идентифицирует экономические принципы, необходимые для решения практической проблемы 3.2 Предсказывает вероятный исход действия, в котором присутствует экономический принцип 3.3 Объясняет, как решить практическую экономическую проблему с учетом экономических принципов, имеющих к ней отношение 3.4 Различает вероятные и маловероятные экономические прогнозы 4. Интерпретация экономических данных 4.1 Различает имеющую и не имеющую значения информацию 4.2 Различает факты и выводы 4.3 Идентифицирует причинно-следственные отношения между фактами 4.4 Описывает тренды, наблюдающиеся в данных 4.5 Различает выводы, следующие и не следующие из данных 4.6 Делает необходимые оговорки, интерпретируя данные 3 В данном списке не раскрывается содержание темы из курса экономики: это набор ожидаемых результатов изучения любой такой темы. Чтобы сделать этот список оперативным, в каждом случае необходимо сформулировать в виде плана основное содержание того материала, по которому будет проводиться тестирование. Цели оценки знаний 1. Используя оценочные инструменты, учитель в состоянии определить, кто из учеников усвоил новые понятия. Перед тем, как переходить к более сложным понятиям (концепциям), учащиеся должны продемонстрировать, что они поняли и способны применять новые знания. 2. Оценка понимания и успеваемости учеников сигнализирует учителю, кто из них нуждается в особом внимании. Такова диагностическая цель оценки знаний. Можно использовать оценочные инструменты, чтобы подобрать стиль учебной работы и материалы, оптимальные для того или иного ученика. 3. Оценка знаний – способ аттестации учащихся. Работодатели, университеты и родители хотят иметь информацию об успеваемости и профессиональных или академических перспективах учащихся. Учителя обязаны как можно более точно и объективно указывать уровень успеваемости и подготовки каждого школьника. 4. Оценку знаний можно использовать для того, чтобы информировать учеников, насколько успешно они работают относительно собственного стандарта успеваемости и сравнительно с нормальной успеваемостью по классу или по стране. В этом качестве она служит средством вознаграждения и поощрения учащихся или рейтинговым инструментом. 5. Оценка знаний позволяет измерить эффективность организации работы самого учителя. 6. Измеренная результативность работы школьников может использоваться для оценки эффективности и уместности данной программы или курса экономического обучения. 7. Результаты оценки позволяют судить об эффективности использования той или иной педагогической технологии. Характеристики добротного метода оценки Ученые – исследователи используют различные характеристики добротности метода оценки. Например, Дэвид Дж. Уайтхед [1] выделяет пять критериев, которыми следует воспользоваться при оценке добротности конкретных процедур проверки знаний. 1. Экономичность. Количество времени, отводимое тому или иному курсу, разумеется, ограничено, и оценка занимает время, которое могло бы быть использовано в целях пополнения запаса знаний и навыков и развития способностей учеников. Следует позаботиться о том, чтобы оценка поглотила минимальное время, совместимое с достижением ее цели. 2. Надежность. Надежность оценки – это степень воспроизводимости ее результатов в аналогичных условиях. Если в разное время проводятся два аналогичных теста по одной и той же теме, полученные результаты не должны сильно различаться. Надежность оценки определяется надежностью преподавателя (насколько близки оценки, которые преподаватель выставляет в разное время за одинаковые работы?), надежностью учащихся (насколько близки оценки, полученные учеником за работы на одну и ту же или сходную тему, написанные в разное время?) и надежностью самого метода оценки (если надежность преподавателя и учащихся неизменны, насколько близки оценки при использовании двух вариантов теста одного типа?). 3. Валидность. Валидность метода оценки – это степень, в которой он измеряет то, что должен измерять. Так, тест на понимание экономики не тождественен тесту, имеющему целью измерение интеллектуальных способностей, и если результаты первого слишком 4 близко следуют за результатами второго, можно заподозрить, что первый вообще никак не измеряет «экономическое понимание». 4. Дискриминация. Желательно, чтобы метод оценки обеспечивал адекватную дискриминацию оцениваемых учеников. Если учитывается высота оценок, большая группа учащихся должна показать результаты, частоты которых приближаются к нормальному распределению. Очевидно, что если большинство учащихся получили двойки или весь класс получил пятёрки, то выбранный способ оценки не удовлетворяет данному критерию. 5. Эффект, оказываемый на преподавание и работу учащихся. Наконец, имеет значение и тот факт, что учащиеся тщательно готовятся к тестам и экзаменам, и форма оценки, таким образом, способна повлиять на форму учебной работы в предшествующий период. Если все, что требуется для успешного выступления, - это вызвать из памяти несколько изолированных кусочков фактической информации, учащиеся со всей вероятностью сосредоточатся на запоминании фактов. Если, напротив, учителя желают стимулировать понимание основных принципов, они должны позаботиться о том, что именно такое понимание будет оцениваться. Оценка может иметь благотворное влияние на учебную работу школьников, только если оцениваются предположительно благотворные формы учебной работы и если учащиеся считают, что, скажем, выучивание изолированных фактов не улучшит результаты их оценки. С точки зрения авторов статьи важен еще один критерий - объективность. Хороший метод оценки должен исключать субъективизм при оценивании достижений учащихся. Высокая объективность метода означает, что разные преподаватели за одну и ту же работу выставят одинаковые оценки. Методы оценки знаний Далее мы рассмотрим наиболее распространенные методы оценки, которые могут быть использованы на уроках экономики и обсудим, насколько эти методы обладают предложенными в данной статье характеристиками добротного метода оценки. Устные или письменные методы? Оценить знания школьников можно устно и письменно. Пожалуй, самый распространенный способ оценки на школьных уроках – устный опрос. Учитель на уроке задает вопрос и вызывает ученика для устного ответа на оценку. В это время другие ученики с облегчением вздыхают и слушают ответ своего товарища (или не слушают). Еще один метод проверки знаний – устный экзамен или интервью. Это беседа по заданной теме учителя или комиссии с учеником один на один. Чаще всего эта форма используется при проведении зачетов и экзаменов. Устная форма особенно целесообразна, когда учитель желает дать возможность проявить себя тем ученикам, которые не особенно умело делятся своими знаниями в письменной форме. Чтобы оценка была реально эффективна и стоила того, чтобы ее проводить, интервьюер, т.е. учитель, должен предусмотреть способ оценки ответов. Подготовки требуют и вопросы по заранее согласованной теме – их следует выстроить по нарастанию сложности. Достоинство неформального интервью с учеником заключается в том, что оно способно попутно выявить информацию о социальном и эмоциональном развитии школьника, которую невозможно получить при формальной процедуре тестирования. С точки зрения экономичности устный опрос, на наш взгляд, занимает достаточно много времени. На уроке невозможно опросить всех учеников методом устного опроса. Интервью отнимает еще больше времени. К тому же волнение учеников при проведении устного экзамена существенно снижает надежность оценки. Что касается валидности, то метод устного опроса 5 достаточно хорош с точки зрения данного критерия. Несмотря на то, что такой метод оценки требует от ученика умения формулировать и логично излагать свои мысли, все же в процессе устного опроса или интервью учителю достаточно легко оценить понимание экономики. Сможет ли этот метод обеспечить адекватную дискриминацию, зависит от учителя и от критериев оценки устных выступлений. Это, в свою очередь, говорит о низкой объективности данного метода, поэтому в случае ответственных экзаменов устное интервью проводит комиссия, состоящая из нескольких учителей. Устные выступления на уроке заслуживают поощрения в целях развития группового взаимодействия, навыков аргументированного представления позиции и критического анализа альтернативных точек зрения. При оценке устного выступления можно воспользоваться следующими критериями: 1. Качество вклада в обсуждение с точки зрения представленных свидетельств и логического построения. 2. Готовность рассмотреть все альтернативные точки зрения. 3. Взвешенность мнения и аргументации, отсутствие стремления задавать тон в дискуссии. 4. Готовность подбодрить новых участников, собирающихся вступить в дискуссию. 5. Степень уклонения от существа дела в выступлении. Письменные задания по экономике могут быть различными, например тесты и задачи, эссе, письменный опрос с вопросами открытого типа, рефераты, исследование, работа со статистическими данными, анализ новостей и т.д. Цель письменных заданий – оценить результаты обучения и стимулировать процесс познания. Письменное задание выявляет пробелы не только в знании и понимании экономических концепций, но и в грамматике, логике, в знании исторических реалий и современных процессов. И тогда собираясь задавать письменную работу, чтобы поставить оценку, задайте себе вопрос «что Вы собираетесь оценивать?». Регулярные письменные задания помогут отследить развитие ментальных навыков у учащихся. И самое главное – письменные задания помогают «самооценке» экономических знаний у учащихся. Обратите внимание, в большинстве случаев, когда ученик заявляет «Я не знаю, что написать по этому вопросу» мы должны услышать это как «Я не умею думать и рассуждать на заданную тему». Наша цель научить также и этому. Поэтому первые задания должны быть сформулированы так, чтобы ответы требовали только знания и понимания экономической концепции, а рассуждения сведены были до минимума (Да, я согласен с этим, так как …). Ученик должен быть уверен, что корявость его высказываний не будет оцениваться, так как он рассуждает, чтобы учиться, а не для того чтобы получить Нобелевскую премию по литературе. Главная проблема при составлении вопросов для письменного ответа – нахождение таких формулировок, которые позволят всем ученикам интерпретировать вопросы примерно одинаково. Так что точность формулировок критически важна. Следующая проблема сводится к тому, что результат, продемонстрированный учеником, может быть в большой степени детерминирован памятью, в то время как целью, возможно, была проверка способности анализировать причинно-следственные связи. Первый способ приблизиться к реализации подобных целей, продолжая практиковать форму письменной работы, заключается в том, чтобы подсказать ученику тип требуемого ответа. Вторым решением может быть «структурированное» задание, а третьим – проверка способности учащихся интерпретировать данные. Прямолинейный вопрос для письменного ответа, - возможно, лучший способ заставить учащегося вызвать информацию из памяти, «структурированное» задание оптимально с точки зрения проверки навыков построения аргументации или способности разобраться в материале, а ответ, основанный на стимулирующей информации, особенно эффективен при оценке умения понимать и интерпретировать данные и делать экстраполяции на их основе. Очевидна важность какой-то разновидности большой письменной работы для развития умения разворачивать обширную аргументацию логично, стройно и в хорошей литературной форме. 6 Такие задания формируют общеобразовательные навыки, не являющиеся специфическими для экономики, но очень важные с точки зрения и этой дисциплины. Проверка письменных заданий позволяет нам выявлять ошибки разного рода: незнание концепции, неправильное понимание смысла концепции, отсутствие или неверные связи между фактами. Вовремя обнаруженные ошибки позволяют нам внести изменения в объяснения и улучшить понимание, т.е. письменная работа становится еще и инструментом оценки нашей преподавательской работы. Мы считаем, что учителю важнее знать, почему ученик не понял тему, чем просто обнаружить незнание. Учитывая большое влияние письменных работ на «самооценку» экономических знаний у учащихся и процесс самообучения, становится очевидным то, что многие письменные задания принесут пользу учащимся и, не будучи проверены учителем. Тесты и задачи Тесты и задачи – это наиболее распространенные методы оценки, используемые как для текущей проверки, так и для итоговой аттестации учащихся. Использование задач по экономике для проверки знаний учащихся имеет ряд преимуществ по сравнению с другими возможными формами контроля в силу их практической направленности. Задачи, как никакая другая форма проверки знаний, позволяют учащимся применить свои знания к анализу конкретных событий. Задачи позволяют, как проверить знания по всей программе, так и осуществить выборочную проверку, сконцентрированную на наиболее важных или трудных понятиях и темах. В зависимости от условия задачи, можно достаточно объективно выявить, на каком уровне овладения предметом находится конкретный ученик или класс (подразумеваются приведенные выше уровни познания: знание, понимание, применение, анализ, синтез, оценка). Также оценка решения задач, как правило, не вызывает больших затруднений и в большинстве случаев позволяет выставить объективные оценки. Вместе с тем, необходимо упомянуть о трудностях, с которыми традиционно сталкиваются составители задач. Во-первых, очень непросто добиться того, чтобы условие задачи было четко сформулировано и не допускало неоднозначного толкования. Во-вторых, решение большинства задач по экономике предполагает использование математического аппарата и, соответственно, достаточных знаний по арифметике, алгебре, геометрии и другим разделам математики. Но при этом составители экономических задач иногда забывают, что они проверяют знания учащихся все же не в области математики, а в области экономики. Очевидно, что этот факт не позволяет нам дать высокую оценку решению задач с точки зрения валидности. Известны случаи, когда победителями экономических олимпиад становились ученики, великолепно знающие математику и весьма посредственно - экономику. Поэтому хорошая экономическая задача должна быть составлена таким образом, чтобы она могла быть решена учащимся только в том случае, если он достаточно уверенно ориентируется в той или иной экономической теме и владеет необходимыми экономическими понятиями; математическому же аппарату отводится вспомогательное значение. Наиболее часто на уроках экономики используются следующие виды тестов: Бинарные (предполагающие два взаимоисключающих варианта ответа – да-нет, верно-неверно), тесты единичного выбора с единственным правильным вариантом ответа и тесты множественного выбора, допускающие несколько правильных вариантов ответа. Тесты обеспечивают более объективную оценку экономических знаний, потому что они беспристрастны. Как мы проверяем эссе? Конечно, пристрастно. На чем основываются наши пристрастия (и предубеждения)? Я знаю имя ученика, я вчитываюсь в его почерк, у меня сегодня определенное настроение (никак не связанное с темой сочинения), это только первое эссе или уже двадцатое, где выводы, разве об этом надо было писать и т.д. Ни одной из этих мыслей не возникает при проверке теста. Есть только один правильный ответ, и моя задача лишь подсчитать количество правильных ответов. 7 Тесты позволяют охватить широкий перечень концепций за короткое время. Мини-сочинение на заданную тему – это один вопрос, письменный опрос – это 5 – 7 вопросов, значит, мы сумеем рассмотреть только несколько концепций. Тест содержит 20-30 вопросов, и мы можем или широко проверить знания, задав вопросы по двадцати концепциям, или углубиться в понимание, задав серию вопросов по одной теме. Тест хорош с точки зрения экономичности. На уроке тест отнимает минимум времени. Также минимальна нагрузка на учителя, ведь оценка знаний – это одна из наиболее утомительных и трудоемких обязанностей. В классе с большим количеством учащихся проверка эссе отнимает массу времени (вечернего, домашнего, семейного), сделать устный опрос всех невозможно (потеря темпа урока, трата классного времени). Время на проверку тестов не сравнимо со временем, потраченным на чтение мини-сочинений. Определенное преимущество тест дает учащемуся. Если бедолага не все выучил, то все-таки 30 вопросов дадут ему больше шансов продемонстрировать свои знания. Как и у любого метода оценки, у тестов есть свои «минусы». Хотя такие тесты устраняют субъективизм в выставлении отметок, в них все же присутствуют изначально заложенные ценности. Хотя проверка результатов этих тестов экономична, их подготовка гораздо сложнее, дороже и требует больше времени, чем подготовка письменных заданий. Тесты не позволяют проверить умение письменно выражать мысли и развивать аргументацию, они работают с готовыми формулировками и не требуют творческого подхода (осмысливания). Они имеют сильную тенденцию вознаграждать простое умение вспоминать факты или реагировать на знакомые термины. Не исключено, что они стимулируют угадывание ответов (хотя это, быть может, нечто такое, что стоит стимулировать). Но все-таки мы думаем, что противники тестирования на самом деле против плохо составленных тестов. Возможно, бесполезно сравнивать задания «выбери нужный ответ» с письменными или практическими работами, устными выступлениями и т. д. Лучше решить, что является объектом оценки и выбрать наиболее подходящий метод. Для одних предметов и тем задание типа «выбери нужный ответ» может оказаться более подходящим, для других – менее. Тестовые задания могут быть чрезвычайно полезны и как инструмент обучения. Они применимы для еженедельной диагностики работы учащихся. Кроме того, вопросы, которые вызвали трудности у всего класса или существенной его части, могут стать предметом обсуждения на очередном уроке. Тесты множественного выбора могут быть составлены на разных когнитивных уровнях: 1) узнавание и понимание; 2) применение в знакомой ситуации; 3) применение в незнакомой ситуации. Тесты первого уровня фокусируются на опознавании (идентификации) понятия. Например: Вознаграждение за сдачу в аренду земельного участка называется А) зарплатой Б) рентой В) процентом Г) прибылью. Что из следующего считается инвестициями при подсчете национального дохода? А) строительство новой фабрики Б) покупка здания В) приобретение ценных бумаг корпорации Г) перевод денег на счет в коммерческом банке. Вопросы на более высоком когнитивном уровне требуют от учащегося обнаружить концепцию в неявно заданном виде. Например: 8 В одной стране с развитой рыночной экономикой уголь - основной ресурс для обогрева жилищ. Представьте, что обнаружены месторождения природного газа, который позволит снизить затраты на обогрев. Как наиболее вероятно скажется появление газа на количестве и цене продаваемого угля? цена количество А) уменьшится уменьшится Б) уменьшится увеличится В) увеличится уменьшится Г) увеличится не изменится Этот вопрос не сложнее вопроса про инвестиции, но он требует, чтобы ученик применил знания о спросе и предложении на связанных рынках, о которых напрямую не говорится. При составлении и подборе тестов важно учитывать когнитивные уровни, которые будут задействованы у учащихся при поиске правильного ответа. Но это не означает, что есть связь между уровнем составления вопроса и его сложностью. Конечно, могут быть и простые и сложные вопросы в каждой из категорий. (Исследования западных ученых показали, что большинство тестов в учебниках соответствуют уровню знания и понимания [3]). Рассмотрим виды заданий для каждого когнитивного уровня в каждой категории. 1. Узнавание и понимание основных концепций и принципов. Выбрать лучшее определение данной экономической концепции. Выбрать экономический термин, концепцию, закон, который наиболее соответствует данному определению. Соединить (указать) термины, имеющие одинаковое значение. Назвать или узнать экономическое правило. 2. Применение основных концепций и принципов в знакомой ситуации. Применить экономическую концепцию для решения конкретной задачи при условии, что концепция прямо названа в условии. Различать корректное и некорректное применение экономических концепций, прямо указанных в вопросе. Отличать возможные и невозможные последствия экономических действий, которые прямо указаны в условии. 3. Применение основных концепций и принципов в незнакомой ситуации Применить экономическую концепцию для решения конкретной задачи при условии, что концепция прямо не названа в условии. Различать корректное и некорректное применение экономических концепций, которые не названы прямо. Отличать возможные и невозможные последствия экономических действий, которые прямо не названы в задании. Как подготовиться к проведению теста? Есть три способа: подобрать подходящий в каком-либо сборнике тестов, переделать старый или написать новый. Рассмотрим структуру тестового задания. Первая часть задания - это условие, описание проблемы, которую предстоит решить, Филлип Сандерс [3] использует термин stem – основа вопроса, мы обычно называем ее просто «вопрос», хотя она чаще всего сформулирована не в вопросительной форме. Вторая часть состоит из вариантов ответа - distractors, среди которых один правильный и несколько правдоподобных, отвлекающих внимание. 9 Десять правил, которые помогут приготовить хороший тест. Правило 1. Основа тестового задания должна содержать только одну проблему или концепцию. Правило 2. Избегайте многословия, постарайтесь включить в основу все слова, которые повторяются в вариантах ответа. Рассмотрим олимпиадное задание [6]. Александр готов пойти работать слесарем водопроводчиком, если его оклад в месяц будет не менее 5000 руб., Егор - если оклад будет не менее 7000 руб. Это означает, что: А) назначив заработную плату 6000 рублей, домоуправление сможет нанять только одного слесаря-сантехника; Б) назначив заработную плату 7000 рублей, домоуправление сможет нанять только одного слесаря-сантехника; В) назначив заработную плату 8000 рублей, домоуправление сможет нанять только одного слесаря-сантехника; Г) верно все перечисленное. Попробуем упростить текст задания. Для этого перенесем в основу все слова, которые повторяются в вариантах ответа. Александр готов пойти работать слесарем водопроводчиком, если его оклад в месяц будет не менее 5000 руб., Егор - если оклад будет не менее 7000 руб. Это означает, что домоуправление сможет нанять только одного слесаря-сантехника, если назначит заработную плату А) 6000 рублей; Б) 7000 рублей; В) 8000 рублей; Г) верно все перечисленное. Правило 3. И основа и варианты ответа должны быть написаны по возможности просто и ясно, с использованием слов, смысл которых ясен учащимся. Правило 4. Старайтесь по возможности избегать отрицательных формулировок. Если Вам пришлось все- таки использовать отрицание, выделите его заглавными буквами. Например: [7] Что из перечисленного НЕ является характеристикой открытого акционерного общества, как организационно правовой формы предприятия: А) ответственность акционеров предусматривается в пределах стоимости акций; Б) число акционеров не ограничено; В) акционерное общество не обязано публиковать отчетность; Г) управление делами акционерного общества доверено директору или совету директоров; Д) уставом предусматривается максимальная сумма, на которую можно выпустить акции. Правило 5. Варианты ответов должны быть одинаковы по форме, иметь похожую структуру и логику. Правило 6. Старайтесь сделать все ответы примерно одинаковой длины (обычно правильный ответ длиннее всех), не используйте слова «всегда» и «никогда» (они обычно появляются в неправильных ответах). Правило 7. Как можно реже используйте вариант «все вышеперечисленное» и «верно А и В», так как ученик встретив первый правильный ответ, отмечает его и переходит к следующему 10 вопросу. Старайтесь не использовать вариант «верного ответа нет», так как он не стимулирует ученика искать правильный ответ (и порой свидетельствует о том, что у составителя не хватило сил сочинить хороший неправильный ответ). Рассмотрим еще одно задание [5]. Сдвиг кривой спроса на товар влево может быть следствием: А) введения новых технологий; Б) роста доходов покупателей; В) роста цен на товары-заменители; Г) верного ответа нет. Правильный ответ Б). Но большинство учащихся выберет ответ Г). Попробуем понять почему. Ответ А) – очевидно неверный, т.к. сдвигается кривая предложения. Ответ В) – тоже неверный, т.к. сдвигается кривая спроса вправо вследствие перетока покупателей с другого рынка. Ответ Б) кажется неверным, так как рост дохода может привести к увеличению спроса на товар. Но надо помнить, что спрос увеличится только на нормальные товары, а на товары низшего качества он упадет, т.е. возможен сдвиг кривой спроса как влево, так и вправо. Если цель тестирования отбор лучших конкурсантов, то оставим задание в таком виде. Если цель – оценка понимания факторов, влияющих на спрос, то изменим последний вариант на явно неправильный: «уменьшение количества продавцов на рынке» или «проведение рекламной кампании на данный товар». Тогда ученик будет вынужден еще раз проанализировать варианты ответов. Правило 8. Задания в тесте должны быть не связаны друг с другом, то есть ответ на один вопрос не должен помогать отвечать на другой. Правило 9. Каждое задание должно иметь только один правильный или лучший ответ, но все ответы должны быть правдоподобны, желательно, чтобы учитель знал, какую типичную ошибку должен допустить ученик, чтобы выбрать данный неправильный ответ. Правило 10. Меняйте виды вопросов и уровень их сложности. И сильные ученики должны получить возможность проявить себя. Если хорошо составленный (с учетом всех вышеперечисленных рекомендаций) тест провести в аудитории, не знакомой с предметом тестирования, то выбор вариантов ответов распределится равномерно, т.е. в тесте множественного выбора «1 из 4» вероятность выбора каждого ответа будет одинакова (примерно 25%). А по мере роста обученности аудитории вероятность выбора правильного ответа возрастает. Эссе В последнее время в педагогическую практику, наряду с уже апробированными и дающими определенные результаты формами, стали внедряться новые формы контроля знаний и навыков школьников. Попробуем разобраться в существе одной из таких форм – эссе по экономике. В чем суть этого вида работы? Какие навыки развиваются и проверяются в эссе? Как научить писать эссе? Преимущество эссе в развитии навыка продуктивного, творческого восприятия информации по предмету, анализа информации, построения собственных рассуждений на основе экономических законов. Эссе – это, прежде всего, демонстрация ассоциативных связей между понятиями и экономическими теориями, принимающая форму строго формализованного изложения мыслей. Для чего мы пишем эссе по экономике? 11 Эссе помогает учиться (так как школьники, как правило, лучше запоминают то, о чем пишут, чем то, о чем читают), помогает привести мысли по теме в порядок, сформулировать тезисы и аргументы, определить круг вопросов, относящихся к теме, мыслить ассоциативно, а не репродуктивно. Эссе предполагает свободное владение языком экономической теории, ясное изложение затрагиваемых понятий, демонстрирует понимание предмета учащимся. Эссе помогает располагать мысли в строгом логическом порядке, избегая повторения идей. Эссе диктует необходимость использовать цитаты из прочитанного, так как с их помощью учащийся может показать свою широкую осведомленность по рассматриваемому вопросу (при этом надо помнить о необходимости ссылок на источники информации). Итак, мы видим, сколь широк спектр навыков, которые должен продемонстрировать учащийся, работая над эссе. При этом рассуждать на заданную тему можно, только глубоко понимая суть предмета и не допуская логических ошибок. Одновременно у учителя появляется возможность проверить уровень усвоения теоретического материала, проследив за построением тезисов и аргументов. Основные навыки учащихся, которые оценивает преподаватель в эссе: знание экономических понятий и теорий; использование соответствующей теме информации; способность анализировать представленную информацию; логику структурирования доказательств; графическую иллюстрацию предлагаемой информации; способность объяснить альтернативные взгляды на рассматриваемую проблему и прийти к сбалансированному заключению. Для определения ясности целей, которые ставят перед собой учащийся и преподаватель, можно сформулировать требования к эссе по следующим критериям: 1) знание и понимание материала; 2) анализ информации; 3) использование информационного пространства; 4) логика построения суждений. Используя данные критерии, можно сформулировать требования к написанию эссе. Критерий 1. Учащийся должен уметь: Определять предмет эссе. Обозначать круг понятий, необходимых для ответа на вопрос исследования. Иллюстрировать понятия соответствующими примерами. Критерий 2. Учащийся должен уметь: Выделять причинно-следственные связи. Применять аппарат сравнительных характеристик. Критерий 3. Учащийся должен уметь: Использовать статистические данные. Структурировать информацию в табличном и графическом выражениях. Определять, какую информацию из периодических изданий можно использовать при ответе на поставленный вопрос. Критерий 4. Учащийся долен уметь: Делить эссе на смысловые части. Сохранять логику рассуждений при переходе от одной части к другой. 12 Аргументировать основные положения эссе. Делать промежуточные и конечные выводы. К сожалению, как написание, так и проверка эссе занимает много времени. В то же время этот метод оценки, на наш взгляд, обладает достаточной степенью надежности и валидности. Мы уже обсуждали вопрос низкой объективности при оценке эссе. Но при этом эссе помогает учащимся развить ряд важных навыков, что делает этот метод особо ценным для процесса обучения. Реферат Реферат-это вид письменной работы, предполагающий реферирование (изложение содержания) и компилирование (соединение результатов чужих исследований) текстов в связи с избранной темой, с обязательным самостоятельным выводом. Цель использования этого метода в обучении - выработать и совершенствовать умения самостоятельно находить, изучать необходимые материалы по теме, планировать работу, излагать письменно в соответствии с планом, делать вывод, защищать в устной форме. Работа над рефератом помогает ученику в приобретении навыков логически связного изложения экономических проблем, в овладении понятийным аппаратом экономики. В процессе работы ученик проявляет свои индивидуальные способности к творчеству и демонстрирует умение разбираться в экономических вопросах, систематизировать теоретический материал по избранной теме. Что же оценивает реферат? На наш взгляд, наиболее ценен сам процесс работы над рефератом, если конечно, это не скачивание из интернета. А вот объективно оценить знания экономики довольно трудно (критерий валидность). Также процесс проверки реферата и его доработки довольно трудоемкий (критерий экономичность). Подготовка реферата и его защита отнимает у ученика очень много времени. Уже по одной этой причине ставить плохую оценку неэтично. Ученик затратил уйму личного времени, и его старание важно оценить высоко, иначе в будущем он не проявит интереса к самостоятельной исследовательской работе (критерий дискриминация). Объективность оценки за реферат, как и за любую творческую работу, так же сомнительна. С другой стороны, работа над рефератом оказывает положительное влияние на учебную работу, так как предполагает знакомство с мнениями многих авторов и вынесение собственных суждений по выбранной проблематике. Работа с «сырыми» данными «Сырые» данные (к ним мы относим статистическую информацию, результаты исследований, конкретные факты из жизни) все шире используются в преподавании экономики. Они делают процесс обучения более интересным. Их использование позволяет выполнить выражаемые многими школьниками пожелания о том, чтобы учебный курс приобрел связь с конкретными экономическими ситуациями или решениями. Проверка умения учащихся работать с «сырыми» данными соответствует самой природе изучаемого предмета, тестируя индуктивное мышление, устраняя вредный барьер между экономической теорией и ее приложениями, выясняя, способен ли учащийся разглядеть принципы, известные по учебнику, в обыденных ситуациях, где они замаскированы применением обычного, неспециального языка. Есть три основных типа таких заданий: основанные на опубликованной статистике, на придуманных данных, т.е. на гипотетической статистике, и на неспециальных текстах. Другое преимущество заданий с использованием информационного «сырья» состоит в том, что каждое из них обычно затрагивает более одной учебной темы. Использование этих заданий может благоприятно повлиять на классную работу, минимизируя зазубривание и максимизируя концептуальное изучение экономики. Они применимы в стандартной учебной среде как способ разнообразить диету учащихся, давая пищу как для групповых обсуждений, так и для 13 индивидуальной работы непосредственно в классе или дома. В некоторых случаях из-за расхождения в ценностях групп или методах анализа на основе одних и тех же данных можно сделать разные заключения. В таких ситуациях интересно предложить двум группам учащихся представить альтернативные подходы и подискутировать об их сравнительных достоинствах. Работа может вестись по группам и в тех случаях, когда задание поддается разделению на части, так что каждая группа представляет заключение по одной из таких частей. Когда учебный процесс опирается на внешние ресурсы, следует поощрять умение выбирать надежные источники информации и навыки чтения графиков, таблиц и карт, а также общую осведомленность о наличии источников. Замечали ли вы, как цепляет аудиторию обсуждение реальных экономических процессов? И как легко уводится в сторону дискуссия, если ее участники еще мало знают. Поэтому в начале курса предпочтительнее использовать правдоподобные данные о несуществующей стране или математические модели процессов. Возможно различное использование статистических данных: c обучающей целью и с целью оценить понимание (научить экономике и проверить, как научили). Например, домашнее задание: найти в газете и объяснить (прочитать) диаграмму, таблицу, график. Задание в классе: ответить на вопрос, используя информацию, представленную в статье, содержащей диаграмму, таблицу, график. (Статьи с хорошей экономической информацией можно найти в газетах Коммерсант, Ведомости, Известия, в журналах Деньги, Власть, Эксперт и др.) И обратная процедура: построить диаграмму, таблицу, график по имеющимся в статье данным. Нужны ли такие задания? Из года в год, мы наблюдаем одно и тоже: таблицы, диаграммы и графики при чтении пропускаются, потому что ученики не умеют извлечь из них информацию, а если и пытаются, то ничтоже сумняшеся сваливают в кучу номинальные и реальные величины, сравнивают валовые и на душу, приравнивают миллионы и миллиарды. Поэтому письменные задания с использованием статистических данных станут хорошим инструментом для оценки изменений в знаниях учащихся (диагностика). Выводы и заключения Оценка знаний учащихся проводится как с целью диагностики, так и с целью контроля. Диагностическая оценка – текущая, она позволяет измерить продвижение понимания внутри темы и помогает учителю скорректировать объяснения. Контрольная оценка – итоговая, проводится после изучения каждой темы и по окончании изучения всего курса. К контрольному типу можно отнести и особый вид оценки - конкурсную оценку, проводимую для отбора лучших (заметим, что и задания для конкурса должны отличаться от обычных заданий). В зависимости от целей оценки, необходимо использовать разнообразные методы, учитывая их сильные и слабые стороны. Разработка качественных заданий для оценки знаний – дело сложное и трудоемкое. Оно вряд ли под силу каждому учителю. К разработке заданий нужно подходить с большой осторожностью. Прежде чем использовать задание в классе, его необходимо проверить на соответствие перечисленным выше критериям. В развитых странах разработкой качественных инструментов оценки занимаются научные институты и лаборатории. В России же пока этому вопросу уделяется недостаточно внимания. Хотя анализ ситуации диктует однозначный вывод: на смену периода «массового народного творчества» должен прийти научный подход. Литература: 1. Материалы курсов переподготовки преподавателей экономических и бизнес-дисциплин университетов и общеобразовательных школ по проекту TACIS «Преподавание экономических и бизнес-дисциплин в средних школах, технических и классических университетах». Москва, ГУ-Высшая Школа Экономики, Лидс, Роттердам, 1996 (Уайтхед Дэвид Дж. Книга для учителя экономики. Пер. с английского Ю.Г. Тулупенко) 14 2. Буфетова А.Н. Контроль знаний на уроках экономики: уровни, этапы и содержание. //Экономика. Вопросы школьного экономического образования. – 1999. - №3. - с. 47-54. 3. Материалы семинара НСЭО по оценке знаний «Developing Skills in Evaluation» июль 2000, Блумингтон, Индиана, США 4. Веселая Л.С. Основы экономики. Практикум. – Новосибирск: Редакционно-издательский центр НГУ, 2004. 5. Задания IV экономической олимпиады НГУ для школьников, 18 февраля 2001г. 6. Задания V экономической олимпиады НГУ для школьников, 17 марта 2002г. 7. Задания VI Всероссийской Олимпиады по экономике для школьников, 2001г. Авторы: Артамонова Любовь Михайловна, преподаватель экономики лицея НГТУ, Чинакова Нина Васильевна, старший преподаватель кафедры общего экономического образования ЭФ НГУ