Схема оценки эффективности учебного процесса (тренинга)1 Софья

Схема оценки эффективности учебного процесса (тренинга)1
Софья Савелова,
Республиканский институт
профессионального образования
Разработка схемы оценки эффективности любого учебного процесса напрямую
связана с определением критериев его эффективности. Рассмотрение вопросов критериев
чего-либо невозможно без: а) определения того процесса или явления, которое
предполагается “измерять” с помощью такого “инструмента” как критерии; б)
самоопределения в содержании понятия “качество” того учебного процесса, мониторинг
которого предполагается организовывать.
Для определения содержания понятия “критерии” воспользуемся толковым
словарем2:
Критерий – мерило оценки, суждения (с. 301);
Мерило – признак, свойство, на основе которого можно определить,
оценить что-нибудь (c. 343);
Признак – показатель предмета, знак, по которому
можно узнать, определить что-нибудь (с. 581.)
Показатель – данные, по которым можно
судить о развитии и ходе чего-нибудь (с. 539)
Знак – пометка, изображение, предмет, которыми отмечается,
обозначается что-нибудь; Внешнее обнаружение, признак чего-нибудь (с. 226)
Данные – сведения, необходимые
для какого-нибудь вывода, решения; Свойства, способности,
качества как условия или основания для чего-нибудь (с. 147)
Свойство – качество, признак, составляющий
отличительную особенность кого - чего-нибудь (с. 694)
На основе анализа построенной цепочки понятий можно предположить, что:
критерий – это знак, на основе которого возможно что-нибудь определить
(отличить одно от другого), снабженный данными, позволяющими оценить его
качество. Продолжая исследование, мы получаем, что:
Оценить – определить цену кого - чего-нибудь; Установить качество кого - чего-нибудь,
степень, уровень кого - чего-нибудь; высказать мнение, суждение о ценности или
значении кого - чего-нибудь. Оценка – мнение о ценности, уровне или значении кого чего-нибудь (с. 477)
Мнение – суждение, выражающее оценку чего-нибудь, отношение к чемунибудь, взгляд на что-нибудь (с. 351);
Суждение – форма мышления, представляющая собой сочетание
понятий, из которых одно определяется и раскрывается через другое (с. 767)
Таким образом, можно сказать, что:
Критерий – это такой знак, который отличает одно от другого и позволяет
аргументировано оценить его качество (т. е. снабженный данными для определение
чего-нибудь через измерение другого). Критерии (знаки) и соответствующая им
Опубликовано: Мастрество. – 2002. -- № ½. -- .с 27 – 28.
Ожегов С. И., Шведова Н. Ю. Толковый словарь русского языка: 80000 слов и фразеологических выражений.
– М., 1995.
1
2
критериальная база (набор показателей – данных в сочетании с возможными способами их
измерения) являются инструментальным обеспечением определения эффективности или
качества чего-либо.
Очевидно, что рассуждения на тему определения возможных и необходимых
критериев эффективности напрямую связаны с определением понятия “качество”. Для
решения этой задачи воспользуемся исследованиями С. Е. Шишова и В. А. Кальней
“Школа: мониторинг качества образования”3.
Указанные авторы отмечают, что по своей природе понятие “качество”
динамическое, для понимания которого не помогут никакие точные определения. Качество
различается как:
абсолютное (например, в бытовом понимании – это наивысший стандарт), которое
не имеет ничего общего с системой управления качеством, а демонстрирует стремление к
наивысшим стандартам и может оказаться полезным с точки зрения рекламы (PR)
определенных услуг или продукции;
относительное, которое показывает соответствие чего-либо необходимым
стандартам или спецификации (т.е. такое качество не является атрибутом продукции или
услуги, а есть лишь то, что им приписано).
Качество само по себе – это только средство, помогающее выявить соответствие
конечного продукта стандарту. Соответствия, с одной стороны, цели и применению –
качество с точки зрения производителя (система гарантия качества в течение такого
времени, которое определено производителем); с другой стороны – запросам потребителя
(востребованность продукции, услуг на рынке в течение времени спроса на нее). Как
правило, эти точки зрения на качество чего-либо не совпадают и требуют своего
наполнения РАЗЛИЧНЫМИ критериями.
Применительно к определению качества учебного процесса (а тренинг – это одна
из разновидностей последнего) необходимо специально заметить то, что критерии – это то,
что мы должны РЕАЛЬНО увидеть в случае достижения ЖЕЛАЕМОГО результата.
Именно поэтому определение критериев эффективности проводимой работы необходимо
делать ДО НАЧАЛА ЗАНЯТИЙ, начиная эту работу с описания желаемого результата с
двух точек зрения: организаторов учебного процесса и его участников. Можно утверждать,
что критериями эффективности тренинга являются как минимум два описания
предполагаемых результатов (желательных для организаторов - педагогов и
учеников), снабженные конкретными, ясно различимыми знаками и способами их
“обнаружения” (диагностики), которые для организаторов учебного процесса
определяют необходимые пути и средства построения методики (технологии)
проведения занятий (курса).
Например, до начала работы тренер ставит цель: научить ребенка читать. С его
точки зрения предполагаемый результат может быть описан как:
“ребенок прочитывает абзац текста и рассказывает его содержание” -- это
означает, что выполнение ребенком 2-х актов (чтение и описание) и есть показатель
достижения желаемого результата. Следствие – в процессе учебного занятия
ОБЯЗАТЕЛЬНО должно быть место и время для публичного чтения текста и описания его
смысла практически КАЖДЫМ РЕБЕНОМ;
“ребенок прочитывает абзац текста из ... знаков за .... минут”. В этом случае
критерий эффективности – умение складывать буквы в слова и предложения, показатель –
скорость осуществления указанного процесса. Следствие – во время урока необходимо
иметь при себе секундомер и время для публичной скоростной читки какого-то текста.
3
Шишов С. Е., Кальней В. А. Школа: мониторинг качества образования. – М., 2000.
При этом с точки зрения ребенка описание предполагаемого результата может быть
определено как:
“быстро выполню задание” (т.е. сумею быстро прочитать заданный параграф:
показатель – время, которое потратил на чтение. Если это так, то для него задание на дом
звучит как: “Прочитайте параграфы ...”);
“пойму, о чем написано” (т.е. сумею увидеть, что мне с этой информацией можно
дальше делать. Показатели – или отвечу на вопросы в конце параграфа, или задам себе
вопросы по тексту, или решу задачи. Для него то же задание на дом звучит как:
“Проработайте материал параграфа ...”).
Необходимо понимать, что: а) работу по выполнению заданного каждый из
описанных ребят будет строить в ПОЛНОМ СООТВЕТСТВИИ со СВОИМИ ожиданиями;
б) каждый их них предъявит СВОИ требования к качеству и эффективности учебного
процесса (тренинга).
При организации мониторинга качества тренингов необходимо понимать, что
учебный процесс – это гуманитарная технология. В отличие от производственных
гуманитарные технологии не содержательно-линейны (т.е. не задают жесткую схему
движения и действий – материал, средства, время и т.д.), а инфраструктурны (содержат
НЕОБХОДИМУЮ схему процесса – последовательное описание результатов с фиксацией
получаемых продуктов и возможностей их использования в деятельности).
Гуманитарность и системный подход делают задачу определения промежуточных
и конечных результатов, критериев оценки и способов диагностики НЕОБХОДИМОЙ
при проектировании любого учебного процесса и качества образовательных услуг.
Таким образом
критерии являются структурной частью технологии
организации тренинга. На разных этапах проектирования учебного процесса наличие
адекватных критериев позволяет:
1) в период разработки конкретного проекта оценить потенциал предлагаемого
тренинга – его необходимость и реализуемость (критерии: актуальность, обоснованность,
проработанность);
2) при запуске проекта конкретизировать задачи и осуществить необходимое
перепроектирование учебного процесса (критерий – состояние “исходного” материала:
наличие “разрыва” между существующими запросом на образовательную услугу и
предложением) и
3) по мере получения запланированных промежуточных результатов переоценить
качество исходного замысла и адекватность выбранных средств (критерии – реальная
реализуемость замысла и энергоемкость процесса);
4) по окончании проекта – оценить степень достижения предполагаемого
результата (в соответствии с разработанными средствами диагностики) и эффективность
предложенного проекта (результативность и фактические затраты).
Обобщение:
1. В разработке любого тренинга наличие критериев является показателем его
грамотной организации, а адекватность взятых критериев характеризует степень
профессионализма организаторов. Выбранные критерии, выступая мерилом качества
эффективности учебного процесса, не могут быть абсолютными (т.е. постоянно
соответствующими некоему единому стандарту) и одинаковыми на разных этапах работы с
гуманитарным проектом организации учебного процесса.
2. Организуя тренинг, необходимо каждый раз ОПРЕДЕЛЕННО (конкретно и
диагностично) описать желаемый результат как минимум ДВА РАЗА:
с точки зрения организаторов (то, что они считают необходимым для слушателей /
учеников и /или то, что может им быть полезно и БУДУЩЕЙ работе);
с точки зрения имеющегося у слушателей-потенциальных учеников
предполагаемого ЗАПРОСА на услуги.
3. Адекватное критериальное наполнение учебного процесса определяется:
а) знанием требований социального заказа о:
 тенденциях развития и перспективах той или иной деятельности, осуществляемой в
рамках системы (организации);
 функциональной структуре процессов и организаций, работающих в системе;
 компетенциях работников, необходимых для их успешной работы в рамках организации
 уровней развития различных категории слушателей и степени их соответствия
предъявляемым требованиям
б) имеющимся у организаторов самозаказом, разработанном на основании
своих представлений о необходимом развитии деятельности организации;
в) результатами маркетинговых исследований
потребностей на образовательные услуги. Изучением:
 спроса – существующих запросов на повышение квалификации у различных категорий
потенциальных слушателей;
 реального состояния дел в организации, различных ее структурах и подразделениях –
возможных потребностей в повышении квалификации с точки зрения того, как должно;
 эффективности – существования “отдаленных последствий” в работе корпоративного
повышения квалификации
г) имеющимся уровнем материально-технического и
научно-методического обеспечения образовательной и педагогической видов деятельности.