Процессный подход к разработке стандартов управления качеством исследовательского процесса и

Правила игры нужно знать, но лучше
устанавливать их самому. Анджей Сток
Процессный подход к
разработке стандартов
управления качеством
исследовательского процесса и
его результатов
Ольга Рыбакова, Фонд «Социум»
Отношение профессионального сообщества к идее
разработки нового профессионального кодекса
стандартов качества
13,3
33,3
53,3
необходимо разрабатывать новый профессиональный кодекс стандартов,
регламентирующий исследовательский процесс и качество его результатов
не надо разрабатывать новый кодекс
Соц. исследование - это процесс творческий, не допускающий стандартов,
регламентов, за исключением этических норм
Аргументация про и контра
АРГУМЕНТЫ ЗА






Инструмент эффективной
коммуникации участников
исследования
Ориентир для формирования
Заказа участниками рынка на
проведение маркетингового
/социологического исследования:
государственного заказа, брифа,
и выбора подрядчика
Критерии для осуществления
внешнего и внутреннего аудита
качества продукции на всех
этапах оказания услуги
Основание для демонстрации
качества продукции заказчику и
профессиональному сообществу
Для урегулирования прав на
продукцию социологического /
маркетингового исследования,
публикации, тиражировании
социологической информации.
Средство противостояния
«девальвации социологии»
АРГУМЕНТЫ ПРОТИВ

Достаточность международных
кодексов, отсутствие
необходимости «создавать
велосипед»

Сомнения в том, что российские
компании будут следовать
стандартам при наличии «черного
демпинга» на рынке

Предположение, что
стандартизация сузит
возможности повышения
эффективности имеющихся
методов, и перспективы
разработки новых, то есть
ограничат научное творчество
Выгоды:
Опасения:
• Четкие ориентиры, позволяющие
оценить уровень надежности
результатов исследования, иметь
представление о нормативном и
организационном оформлении
исследовательского проекта
•Способствовать развитию
методологической и методической
грамотности ключевых участников
исследовательского процесса.
•Способствовать укреплению
положительной репутации и рыночных
позиций исследовательских компаний
путем повышения эффективности
менеджмента при организации и
проведении
социологического/маркетингового
исследования;
•Неготовность участников
рынка придерживаться
стандартов
•Недостаточность
методической культуры
заказчиков и исполнителей
•Несовершенство
законодательной базы
•Финансовые ограничения
Все правила достойного поведения
давным-давно известны, остановка за
малым - умением ими
пользоваться. Блез Паскаль
Типология имеющихся
профессиональных кодексов

Акцент на нормах профессиональной этики исследователя
(Кодекс профессиональной этики американской социологической ассоциации
(ASA) ISI Declaration on Professional Ethics (Интернациональный Институт
Статистики)
Международный кодекс ICC/Esomar по практике проведения маркетинговых и
социологических исследований;
Профессиональный кодекс социолога Советской социологической ассоциации
(март 1987 г. , новая редакция РОС 2011г)

Концентрация на регламентации процедуры исследования,
и документации, протоколирующей взаимодействие
участников исследовательского процесса.
Кодекс профессиональной этики и практики // AAPOR
Code of Standards and Ethics for Survey Research. // CASRO (Council of American
Survey research organization)
· ISO 20252 - Market, Opinion and Social Research (2006)
· ISO 26362 - Access Panels in Market, Opinion and Social Research (2009)
Основание: ГОСТ Р ИСО 9000—2001


определяет требования к системам менеджмента
качества для тех случаев, когда организации
необходимо продемонстрировать свою
способность предоставлять продукцию,
отвечающую требованиям потребителей и
установленным к ней обязательным
требованиям, и направлен на повышение
удовлетворенности потребителей
ГОСТ Р ИСО 9000—2001
ПРИНЯТ И ВВЕДЕН В ДЕЙСТВИЕ Постановлением
Госстандарта России от 15 августа 2001 г. № 332-ст
Процесс исследования
ИСПОЛНИТЕЛЬ
Этапы исследования:
Заказчик и
другие
заинтересован
ные
стороны
ТРЕБОВАНИЯ
•Подготовительный этап,
концептуализация.
ВХОД
БРИФ-ТЗ
•Полевые работы
•Первичная обработка
массива данных
•Анализ данных,
составление и оформление
отчетных документов по
исследованию
Заказчик и
другие
заинтересова
нные
ВЫХОД
ПРОДУКЦИЯСтороны
УДОВЛЕТВО
РЕННОСТЬ
Исследования
как качественно
заказать
исследование
Представления о
исследовательском процессе
Представления о качественном
Исполнителе - подрядчике
Бюджетный коридор
Б Р И Ф: Требования
Заказчик
Представления о
требуемой информации для
принятия управленческого решения
Коммерческое предложение (ТЗ):
условия выполнения требований
Постановка
исследовательских задач
Исследовательская
компания:
Дизайн исследования
Как организовать
исследование и
получить качественный
результат
Ресурсное обеспечение
Этап концептуализации:
Вход: ТЗ
1. Разработка дизайна
исследования: задачи и
исследуемые показатели
2. Определение метода сбора
информации Разработка
инструментария
3.Моделирование объекта и
определение типа и объема
выборочной совокупности
4. Пилотажное исследование
5. Разработка плана исследования
(временные и организационные
ресурсы )
Выход:
1. План исследования
2. Пакет методических
документов
Вопросы, от которых зависит
качество этапа:




Конструктная валидность –
согласованность объемов и
содержания
исследовательских задач,
гипотез, аналитических
моделей, индикаторов
Адекватность типа и объема
выборки исследовательским
задачам (носители искомой
информации, их доступность
и требуемое количество)
Адекватность методической
стратегии: используемые
методы, их сочетание,
последовательность.
Инструментарий.
Предполагаемый контроль
качества поля
1.Стандарты
взаимодействия
Сторон
2. Стандарты
документарного
оформления
результатов этапа
Залог качества:
Коммуникация исследователя
и заказчика!
Полевой этап:
Вход: Пакет
методических
документов
1. Оганизация полевых
работ в зависимости от
методической стратегии:
2.Интервьюеры
(кодировщики),
контролеры
3. Ресурсное обеспечение
Выход:
Массив данных,
Заполненные полевые документы
Результаты контроля
Вопросы, от которых зависит
качество этапа
1. Стандарты
Наличие необходимого и достаточного
набора полевых документов в
зависимости от метода
Необходимое ресурсное обеспечение:
работники, рабочие места
Порядок взаимодействия с
субподрядчиками
Инструктажи, тренинги интервьюеров,
кодировщиков
Текущий и итоговый контроль
Внешний контроль со стороны
заказчика
взаимодействия
Сторон: заказчик,
исследователь –
подрядчик,
субподрядчик..
2. Стандарты
взаимодействия
участников полевых
работ: аналитики,
супервайзеры,
интервьюеры,
кодировщики,
котролеры и т.д.
3. Стандарты
документарного
оформления
результатов этапа
Этап первичной обработки массива
данных:
Вход: Массив данных,
Заполненные полевые
документы
Методический отчет,
Результаты контроля
1. Чекинг и ремонт выборки
2. Выбор формата и
составление базы данных,
транскриптов и т.д.
3. Контроль качества ввода
данных
4. Переформатирование базы
данных для презентации
заказчику
Выход: База данных в
формате, необходимом для
составления отчета
База данных для
презентации заказчику
Полевые документы
Вопросы, от которых зависит
качество этапа

Объем и структура
переменных
•Стандарты контроля
точности ввода данных

Точность ввода,
проверяемость

Контроль точности
ввода
•Стандарты
согласования формата
базы данных,
транскриптов и т.д. в
соответствии с
последующим
менеджментом (доступ,
совместимость,
возможности
вторичного и
сравнительного
анализа)


Согласованный формат
базы данных
Описание процедур,
используемых для
получения
окончательного списка
переменных
Важно:
Решение задач текущего
исследования
Передача и хранение БД
Перспективное
использование
•Стандарты передачи и
хранения базы данных
Этап анализа данных и составления отчетных
документов:
Вход: База
данных в
формате,
необходимом
для составления
отчета
1. Определение и согласование структуры и
формата отчета
2. Анализ данных и составление отчета
3. Подготовка и передача отчетных
документов заказчику
Выход: Отчетные документы
База данных для передачи
Заказчику
Полевые документы для
внешнего котроля
Вопросы, от которых зависит
качество этапа





Список отчетных
документов
Структура и
формат отчета
Базы данных для
заказчика
Акты передачи
отчетных
документов
Формат
презентации
результатов
1 Стандарты структуры
отчета (сроки проведения
исследования, информация
об авторах, описание
методов сбора, выборки,
процедур взвешивания и т.д.)
Залог качества:
Коммуникация
исследователя
и заказчика!
2. Стандарты соблюдения
требование
конфиденциальности
персональных данных
респондентов при передаче
баз данных
3. Документарное
оформление прав на
продукцию
Послесловие:
Соблюдая правила, Вы можете
заставить их работать на себя.
(Йохан Хёйзинга)