Компетенции специалиста по оценке программ и политик Обзор

Компетенции специалиста по оценке программ и политик
Обзор зарубежных публикаций.
Подготовлен А. Кузьминым, Компания «Процесс Консалтинг», Москва, Россия
Настоящий обзор содержит перечни компетенций специалистов по оценке, предложенные
зарубежными авторами. Несмотря на то, что толкования термина «компетенции»
(competencies) разными авторами могут отличаться, можно исходить из того, что во всех
случаях речь – так или иначе – идет о знаниях, умениях, навыках, моделях поведения и
личностных характеристиках, позволяющих эффективно выполнять деятельность по
оценке программ и политик.
Группа американских исследователей под руководством Джин Кинг (Jean King)
предложила один из самых цитируемых перечней компетенций специалиста по оценке
(Stevahn, 2005):
1. Профессиональная практика: ориентация на информационные запросы
потенциальных пользователей, этичное поведение, следование стандартам и
соблюдение профессиональных принципов и норм.
2. Систематические исследования.
Авторы включили сюда:
(а) исследовательскую деятельность (формулирование вопросов исследования,
дизайн исследовательских программ, измерение, методы исследований);
(б) оценочную деятельность (теория оценки, оценка потребностей,
формулирование оценочных вопросов, дизайн оценки, процессы оценки,
вынесение суждений, разработка рекомендаций, мета-оценка);
(в) деятельность, в которой есть элементы и исследований, и оценки (обзор
литературы, формирование выборки, разработка инструментов, сбор данных,
анализ данных, интерпретация данных, написание отчетов)
3. Ситуационный анализ: организационное развитие, анализ политического
контекста, учет уникальности объекта оценки, открытость к мнениям других,
гибкость, адаптивность.
4. Управление проектами: написание предложений, написание формальных
соглашений, разработка бюджета оценки, оценка необходимых ресурсов,
управление людьми, обучение других людей, умение успевать к сроку, управление
стрессом, «неразрушающая» оценка.
5. Рефлексивная практика: знание самого себя, способность извлекать уроки из
собственного опыта и профессионально развиваться.
6. Межличностные коммуникации: устная и письменная коммуникация, навыки
ведения переговоров, разрешения конфликтов, фасилитации и командной работы;
кросс-культурная компетентность.
Майкл Скривен (США), один из основоположников оценки как самостоятельной
дисциплины, в личном общении с Джейн Дэвидсон из Новой Зеландии (Scriven, 2006)
предложил следующие сферы компетенций для специалиста по оценке, специфичные
именно для этой сферы деятельности:

Концептуализация

Изучение

Отчетность
В рамках «Междисциплинарной программы по оценке в сфере развития» Мичиганского
университета (США) была предложена следующая классификация компетенций
специалистов по оценке (IPDE, 2003):

Дизайн и методология проведения исследований (качественных и количественных)

Предметные знания и навыки, относящиеся к сфере деятельности, в которой
работает специалист по оценке (например, в образовании, здравоохранении,
социальной защите и т.д.)

Специфические компетенции в сфере оценки, включающие знание теории оценки;
владение методологией оценки; понимание социального, политического и
культурного контекстов; критическое мышление; навыки коммуникации; навыки
консультирования
Канадское общество оценки первым в мире разработало и внедрило систему
сертификации специалистов по оценке, базирующуюся на следующих сферах
компетенций (Canadian Evaluation Society, 2009):
1.0 Рефлексивная – компетенции, относящиеся к фундаментальным нормам и
ценностям в сфере оценки, а также осознанию уровня собственной экспертизы и
потребностей в профессиональном росте.
2.0 Техническая – компетенции, относящиеся к специфическим аспектам оценки:
планирование, сбор данных, анализ данных, подготовка отчета.
3.0 Ситуативная – компетенции, относящиеся к оценочному мышлению,
применяемому для анализа и учета специфических для каждой оценки интересов,
проблем и обстоятельств.
4.0 Управленческая – компетенции, относящиеся к процессу управления
проектом/оценкой (бюджетирование, ресурсное обеспечение, руководство).
5.0 Межличностная – компетенции относящиеся к коммуникации, переговорам,
разрешению конфликтов, сотрудничеству.
В 2008 году вышла в свет книга «Компетенции специалиста по оценке» (Russ-Eft, 2008),
которую подготовил Международный совет по стандартам в сфере тренинга и
инструктирования (ibstpi). В ней предлагаются 4 сферы компетенций, которыми должен
обладать специалист по оценке:
1. Профессиональная база (коммуникации, образование, межличностные навыки,
этика и юридические нормы, политические аспекты оценки).
2. Планирование и дизайн оценки.
3. Выполнение плана оценки.
4. Управление оценкой.
Группа оценки ООН предложила перечень ключевых компетенций для специалистов по
оценке в системе ООН (United Nations Evaluation Group, 2008):
•
Опыт практической работы в сфере оценки
•
Планирование оценки
•
Сбор и анализ данных
•
Отчетность
•
Управление процессом оценки
•
Этика
Еще одной национальной ассоциацией, разработавшей свой свод компетенций
специалиста по оценке стало Британское общество оценки (UKES, 2009):
1. Знания и навыки в сфере оценки (история развития оценки, роль оценки, связь
оценки с политическим процессом, различные подходы к проведению оценки,
варианты дизайна оценки, умение эффективно использовать различные методы и
инструменты).
2. Профессиональная практика - предполагает умение проводить оценку и управлять
этим процессом (сбор и анализ данных, представление результатов оценки,
соблюдение этических норм и профессиональных стандартов, межличностная
коммуникация).
3. Позиция и личностные качества (сохраняет принципиальность в изменяющихся
обстоятельствах, гарантирует обоснованность суждений, проявляет независимость
и честность, растет профессионально и делает вклад в развитие профессии).
Перечень компетенций специалиста по оценке, опубликованный Ассоциацией оценки
Новой Зеландии (ANZEA, 2011), охватывает пять областей, представленных на диаграмме
1.
Диаграмма 1. Сферы компетенций специалиста по оценке для Новой Зеландии
Центральной темой для данной концепции является признание авторами ценности всех
народов, населяющих Новую Зеландию и их культур. Авторы подчеркивают, что в основе
оценки лежат ценности: с одной стороны, оценка направлена на определение ценности
той или иной инициативы, а с другой стороны, деятельность по проведению оценки
теснейшим образом связана с ценностями различных заинтересованных групп.
В начале оценки (сфера 1) и затем на всем ее протяжении специалист по оценке должен
быть способен анализировать существующий контекст, устанавливать контакты с
людьми, определять знания, навыки и опыт, которые будут необходимы при проведении
оценки.
Сфера 2 включает знания, навыки и способности, необходимые для технически
грамотного проведения систематического оценочного исследования.
Сфера 3 включает компетенции, необходимые для профессионального управления
оценкой.
Сфера 4 включает компетенции, связанные с профессиональным развитием специалиста
по оценке и вкладом этого специалиста в развитие профессии.
Авторы этой концепции подчеркивают, что каждый отдельно взятый специалист по
оценке не обязательно должен обладать всеми описанными выше компетенциями.
Свой перечень компетенций для специалистов по оценке программ развития предложила
Ассоциация оценки программ международного развития (IDEAS, 2012). Этот перечень
включает 7 сфер, в которых специалисты по оценке должны обладать определенными
знаниями, умениями и навыками:
1)
2)
3)
4)
5)
6)
7)
Базовые профессиональные знания.
Системы мониторинга.
Планирование и дизайн оценки.
Управление оценкой.
Проведение оценки.
Представление результатов оценки.
Продвижение культуры научения по результатам оценки.
ЮАР – одна из первых стран, где на уровне центрального правительства была создана
отдельная структура, получившая название «Департамент планирования, мониторинга и
оценки». Этим департаментом в сотрудничестве с Ассоциацией специалистов по оценке
ЮАР была разработана модель, описывающая компетенции различных сторон,
вовлеченных в оценку: специалистов по оценке, менеджеров, советников (Podems,
Goldman, & Jacob, 2014). Компетенции описываются по 4 параметрам:

Общие условия

Лидерство

Искусство оценки

Проведение оценки
Одна из самых свежих публикаций, описывающих компетенции специалиста по оценке,
сделана Европейским обществом оценки (European Evaluation Society, 2013):
1. Знания в сфере оценки
1.1 Понимает особую роль, которую оценка играет в обществе
1.2 Совершенствует качество оценки
1.3 Понимает потенциал и ограничения методов и инструментов оценки
2. Профессиональная практика
2.1 Демонстрирует способность осуществлять оценку и управлять ею.
2.2 Проявляет межличностные навыки
3. Позиция и установки
3.1 Придерживается этических стандартов и демократических ценностей при
проведении оценки
3.2 Устанавливает отношения с клиентами и другими заинтересованными сторонами.
3.3 Проявляет независимость мышления
3.4 Отслеживает уровень собственного профессионального развития и постоянно
самосовершенствуется
3.5 Поддерживает профессиональное сообщество.
В том же 2013 году Австрало-Азиатское общество оценки опубликовало свою модель
компетенций (AES, 2013), которая представлена на диаграмме 2.
Диаграмма 2. Модель компетенций Австрало-Азиатского общества оценки
Сфера, названная «Профессиональные установки и практика» включает рефлексию и
постоянное профессиональное развитие специалиста.
Сфера обозначенная как «Культура, заинтересованные стороны и контекст» включает
способность специалиста по оценке распознавать и учитывать факторы, которые
определяются ценностными ориентациями различных сторон, заинтересованных в оценке.
Содержание остальных сфер очень близко к тому, что уже упоминалось выше в других
моделях.
Литература
AES. (2013). Evaluators' Professional Learning Competency Framework Retrieved from
http://www.aes.asn.au/images/stories/files/Professional%20Learning/AES_Evaluators_C
ompetency_Framework.pdf
ANZEA. (2011). Evaluator Competencies for Aotearoa New Zealand. Retrieved from
http://www.anzea.org.nz/wpcontent/uploads/2013/05/110801_anzea_evaluator_competencies_final.pdf
Canadian Evaluation Society. (2009). Competencies for Canadian Evaluators Retrieved Nov 5,
2015, from http://www.evaluationcanada.ca/competencies-canadian-evaluators
European Evaluation Society. (2013). The EES evaluation capabilities framework. Retrieved
from
http://www.europeanevaluation.org/sites/default/files/EES%20EVALUATION%20CAP
ABILITIES%20FRAMEWORK.pdf
IDEAS. (2012). Competencies for Development Evaluation Evaluators, Managers, and
Commissioners Retrieved from http://ideas-global.org/mdocs-posts/competencies-fordevelopment-evaluation-evaluators-managers-and-commissioners-3/
IPDE. (2003). Competency Assessment document from the Interdisciplinary Ph.D. in Evaluation
(IDPE) Western Michigan University Kalamazoo, MI.
Podems, D., Goldman, I., & Jacob, C. (2014). Evaluator competencies: the South African
government experience. The Canadian Journal of Program Evaluation, 28(3).
Russ-Eft, D. F. (2008). Evaluator competencies : standards for the practice of evaluation in
organizations (1st ed.). San Francisco: Jossey-Bass.
Scriven, M. (2006). [The real evaluation competencies.].
Stevahn, L., King, J. A., Ghere, G., Minnema, J. . (2005). Establishing Essential Competencies
for Program Evaluators. American Journal of Evaluation(26), 43-59.
UKES. (2009). UKES Evaluation Capabilities Framework. Retrieved from
http://www.evaluation.org.uk/assets/UKES%20Evaluation%20Capabilities%20Framewo
rk%20January%202013.pdf
United Nations Evaluation Group. (2008). Core Competencies for Evaluators of the UN System.
Guidance Document. Retrieved from http://www.uneval.org/document/download/559