KonstruirovaniePsychTestov_PsB(Orel)

Правительство Российской Федерации
Государственное образовательное бюджетное учреждение
высшего профессионального образования
«Государственный университет –
Высшая школа экономики»
Факультет психологии
Программа дисциплины
Конструирование психологических
тестов
Для направления 030300.62 – «Психология»
подготовки бакалавра
Автор: Е.А. Орел
Рекомендована секцией УМС
Секция «Психология»
Председатель
Одобрена на заседании
кафедры организационной и
рефлексивной психологии
Зав. кафедрой
___________ В.А. Штроо
«___» __________ 2009 г.
____________ В.А. Штроо
«___» __________ 2009 г.
Утверждено УС
факультета психологии
Ученый секретарь
__________ Е.Б. Старовойтенко
«___» __________ 2009 г.
Москва 2009
2
ПОЯСНИТЕЛЬНАЯ ЗАПИСКА
Автор программы
кандидат психологических наук, старший преподаватель Орел Екатерина Алексеевна,
eorel@hse.ru
Требования к студентам
Знания в объеме дисциплин «Общая психология», «Организационная психология»,
«Психодиагностика».
Аннотация
Каждый психолог, будь то практик или исследователь, в своей работе непременно
сталкивается со стандартизованными психологическими тестами. Знание обязательных
составляющих стандартизованной тестовой методики, умение отличить качественный
тест от некачественного и, наконец, способность разработать собственную
стандартизованную психодиагностическую методику для решения прикладных и
исследовательских задач – все это важные составляющие профессионализма психолога.
В результате прохождения курса студент должен знать основные достоинства и
ограничения стандартизованных психодиагностических методов, правила и этапы
психометрического анализа теста, области применения основных тестовых методик и
способы повышения достоверности данных, получаемых с помощью стандартизованных
психологических тестов.
Учебные задачи дисциплины



Ознакомить студентов с теорией и практикой разработки стандартизованных
психодиагностических методик.
Научить отличать качественные стандартизованные психодиагностические
методики от некачественных.
Отработать
практические
навыки
разработки
стандартизованных
психодиагностических методик.
ФОРМЫ КОНТРОЛЯ ЗНАНИЙ СТУДЕНТОВ




текущий контроль – посещаемость и работа на семинарах;
промежуточный контроль – эссе;
итоговый контроль – зачёт устный;
результирующая оценка (см. ниже методику формирования).
Методика формирования результирующей оценки
1. При определении результирующей оценки Орез учитываются: оценка за активность
на занятиях Оакт, оценка за эссе Оэс и оценка за зачет Озач.
2. Коэффициент (оценка относительной важности) имеет следующие значения:
Wакт= 0,3; W эс.=0,3; Wзач=0,4.
3. Пример расчета:
Если у студента
Оакт = 7
Оэс =5
Озач =8
при коэффициентах
W акт =0,3
W эс = 0,3
W зач =0,4
То в результате
округленно Орез = 7
Орез = ОактWакт + Оэс W эс+ ОзачWзач =
= 7*0,3 + 5*0,2 + 8*0,5 = 7,1
4. В ведомость и зачетную книжку студента выставляется двойная оценка, например:
«зачтено (7)».
БАЗОВЫЕ УЧЕБНИКИ
Анастази А. Урбина С. Психологическое тестирование. - СПб.: – Питер, 2007. - 688 с.
Шмелев А. Г. Основы психодиагностики. - М.; Ростов-на-Дону, 1996. - 544 с.
Бодалев А. А., Столин А. В. Общая психодиагностика. - СПб.: Речь, 2000. - 440 с.
3
ТЕМАТИЧЕСКИЙ ПЛАН УЧЕБНОЙ ДИСЦИПЛИНЫ
№
Всего
Название темы
Аудиторные часы
часов
Лекции
Семин.
занятия
Самост.
работа
1
Виды психодиагностических методов
6
2
0
4
2
Этапы конструирования тестовой методики
32
6
6
20
3
Психометрический анализ теста
42
7
8
26
4
Способы повышения достоверности результатов
теста
18
2
2
14
5
Работа с тестовой информацией
10
1
2
8
108
18
18
72
Итого:
СОДЕРЖАНИЕ ПРОГРАММЫ
Тема 1. Виды психодиагностических методов
Стандартизованные
и
нестандартизованные
методы
психодиагностики.
Нестандартизованные психодиагностические методы: виды, особенности, сфера
применения и ограничения. Стандартизованные психодиагностические методы: виды,
особенности, сфера применения и ограничения. Различные виды классификаций
стандартизованных тестовых методик.
Основная литература
1. Анастази А. Психологическое тестирование. СПб.: Питер, 2007. Глава 1 «Природа
и назначение психологических тестов», С. 16 – 48, Глава 15 «Проективные
методики, С. 449 – 484, Глава 17 «Основные области применения тестов в наше
время», С. 516 – 583.
2. Бодалев А. А., Столин А. В. Общая психодиагностика. СПб.: Речь, 2000. Глава 1
«Психодиагностика как наука и как практическая деятельность», С. 13 – 27.
3. Шмелев А. Г. Психодиагностика личностных черт. СПб.: 2002., Введение, С. 9 – 26.
4. Бурлачук Л. Ф. Психодиагностика. СПб.: Питер, 2006. Глава 2 «Психодиагностика
как наука», С. 111 – 163.
Дополнительная литература:
1. Шмелев А. Г. Песнь о Вещем Олеге и профессиональные предпочтения в области
психодиагностики. // Вестник московского университета. Серия 14. Психология.
2004. – С. 13 – 23.
Тема 2. Этапы конструирования тестовой методики
Постановка задачи и определение целей тестирования. Выбор факторной
структуры. Составление пунктов опросника. Определение выборки стандартизации.
Апробация методики. Проверка ее психометрических характеристик. Проверка
эмпирической факторной структуры. Внесение правок. Вторичная апробация. Разработка
текстовых описаний результатов, инструкций, создание рабочей версии методики.
Стандартизация методики для различных групп респондентов. Повторная проверка
психометрических характеристик на различных нормах. Разработка схем интерпретации и
диагностических отчетов. Подготовка сопроводительной документации к методике.
Подготовка руководства пользователя.
Основная литература
1. Анастази А. Психологическое тестирование. СПб.: Питер, 2007. Глава 2:
«Исторические предпосылки современного тестирования» С. 48 – 63.
4
2. Бодалев А. А., Столин А. В. Общая психодиагностика. СПб.: Речь, 2000. Глава 1
«Психодиагностика как наука и как практическая деятельность», С. 27 - 36
3. Бурлачук Л. Ф. Психодиагностика. СПб.: Питер, 2006. Глава 3 «Психометрические
основы психодиагностики: основные этапы конструирования теста», С. 165 – 192.
4. Бурлачук Л.Ф., Морозов С.М. Словарь-справочник по психодиагностике. 2-е изд.,
перераб. и доп. СПб.: Питер, 2005. Определения основных понятий.
Дополнительная литература
1. Собчик Л. Психология индивидуальности. Теория и практика психодиагностики.
СПб.: - Речь, 2003. Глава 2 «Методы изучения индивидуально-личностных
свойств», С. 57 – 64.
Тема 3. Психометрический анализ теста
Сырой балл. Выделение крайних групп. Тестовые нормы. Надежность пункта.
Надежность: виды и способы подсчета. Валидность: виды и способы подсчета. Выборка
стандартизации. Репрезентативность. Критерии подбора выборки стандартизации.
Достоверность. Сложность и дифференцирующая сила пункта. Тестовые шкалы. Виды
шкал. Выбор шкалы, адекватной целям исследования. Способы стандартизации:
линейная и табличная. Факторная структура теста. Эмпирическая проверка факторной
структуры.
Основная литература
1. Бодалев А. А., Столин А. В. Общая психодиагностика. СПб.: Речь, 2000. Глава 3
«Психометрические основы психодиагностики», С. 79 – 158.
2. Бурлачук Л.Ф., Морозов С.М. Словарь-справочник по психодиагностике. 2-е изд.,
перераб. и доп. СПб.: Питер, 2005. Определения основных понятий.
3. Шмелев А. Г. Основы психодиагностики. М.; Ростов-на-Дону, 1996. Глава 2
«Методы психодиагностики» С. 131 – 156.
Дополнительная литература
1. Наследов А. Д. SPSS: компьютерный анализ данных в психологии и социальных
науках. СПб, Питер, 2005.
2. Сидоренко Е. В. Методы математической обработки в психологии. СПб.: Речь,
2002.
3. Aron, A., & Aron, E. N. Statistics for psychology (2nd ed.). Upper Saddle River, NJ:
Prentice Hall, 1999.
4. Furr M. R., Bacharach V. R. Psychometrics. An introduction. SAGE Publications Inc.,
2008.
5. VanVoorhis C. W., Morgan B. L. Statistical Rules of Thumb: What We Don't Want to
Forget
About
Sample
Sizes.
University
of
Wisconsin-La
Crosse
(http://www.psichi.org/pubs/articles/article_182.asp)
Тема 4. Способы повышения достоверности результатов тестирования
Виды мотивации на прохождение теста. Особенности работы психодиагноста в
различных ситуациях тестирования. Способы формирования и воздействия на
мотивацию респондентов. Виды искажений. Способы контроля работы респондентов с
тестом.
Подача
результатов
тестирования.
Особенности
восприятия
психодиагностической информации различными группами респондентов. Способы подачи
психодиагностической информации различным группам респондентов. Особенности
различных ситуаций тестирования.
Основная литература
1. Анастази А. Психологическое тестирование. СПб.:Питер, 2007. Глава 1 «Природа и
назначение психологических тестов» С. 28 – 48.
2. Бурлачук Л. Ф. Психодиагностика. СПб.: Питер, 2006. Глава 2 «Психодиагностика
как наука». С. 153 – 163.
3. Ромек В. Г., Сатин Д. К. Сохранение надёжности многофакторных тестов при
их использовании в сети Интернет. // Психологический журнал. 2000. 21 (2). – С.
70-75
5
Дополнительная литература
1. Джерелиевская М. А., Яшина Л. Л. Этические принципы обратной связи при
глубинном психодиагностическом обследовании. // Современная психодиагностика
в изменяющейся России: сборник тезисов Всероссийской научной конференции.
Челябинск: Издательство ЮурГу, 2008, - С. 43 - 45.
2. Дюк В. А. Компьютерная психодиагностика. СПб.: Братство. 1994
3. Науменко А. С., Орел Е. А. Использование Интернет-технологий для проведения
психологических исследований. // Отечественная психология в контексте мировой
науки и практики. Сборник статей по результатам работы международной
конференции «Ломоносов» - 2004. М.: МГУ, 2004. – С. 147 – 154.
4. Науменко А. С. Организационная и психологическая эффективность различных
способов предоставления психодиагностической информации. Автореферат дисс.
канд. психол. наук, М.: МГУ, 2008.
Тема 5. Работа с тестовой информацией
Психологическое тестирование в исследовательских и прикладных задачах. Методы
количественной обработки результатов тестирования. Этические аспекты работы с
психодиагностической информацией. Принятие решений на основе психодиагностической
информации.
Основная литература
1. Бодалев А. А., Столин А. В. Общая психодиагностика. СПб.: Речь, 2000. С. 158 –
323.
2. Бурлачук Л. Ф. Психодиагностика. СПб.: Питер, 2006. Глава 2 «Психодиагностика
как наука», С. 138 – 163.
Дополнительная литература
1. Наследов А. Д. SPSS: компьютерный анализ данных в психологии и социальных
науках. СПб.: Питер, 2005.
2. Сидоренко Е. В. Методы математической обработки в психологии. СПб.: Речь,
2002.
3. Собчик Л. Психология индивидуальности. Теория и практика психодиагностики.
СПб.: - Речь, 2003
4. Furr M. R., Bacharach V. R. Psychometrics. An introduction. SAGE Publications Inc.,
2008.
5. Aron, A., & Aron, E. N. Statistics for psychology (2nd ed.). Upper Saddle River, NJ:
Prentice Hall, 1999.
Планы семинарских занятий
Семинар 1: «Этапы конструирования тестовой методики: общая информация»
Постановка задачи и определение целей тестирования. Выбор факторной структуры.
Составление пунктов опросника. Определение выборки стандартизации. Апробация
методики. Проверка ее психометрических характеристик. Проверка эмпирической
факторной структуры. Внесение правок. Вторичная апробация. Разработка текстовых
описаний результатов, инструкций, создание рабочей версии методики.
Постановка
задачи
и
определение
целей
учебной
психодиагностической
стандартизованной методики. Выбор факторной структуры. Обоснование ее полноты и
неизбыточности. Описание диагностических факторов.
Основная литература
1. Бодалев А. А., Столин А. В. Общая психодиагностика. СПб.: Речь, 2000. Глава 1
«Психодиагностика как наука и как практическая деятельность», С. 27 - 36
2. Бурлачук Л. Ф. Психодиагностика. СПб.: Питер, 2006. Глава 3 «Психометрические
основы психодиагностики: основные этапы конструирования теста», С. 165 – 192.
3. Бурлачук Л.Ф., Морозов С.М. Словарь-справочник по психодиагностике. 2-е изд.,
перераб. и доп. СПб.: Питер, 2005. Определения основных понятий.
Дополнительная литература
6
2. Собчик Л. Психология индивидуальности. Теория и практика психодиагностики.
СПб.: - Речь, 2003. Глава 2 «Методы изучения индивидуально-личностных
свойств», С. 57 – 64.
Семинар 2: «Составление банка заданий»
Определение необходимого количества пунктов методики. Составление пунктов учебной
психодиагностической стандартизованной методики.
Семинар 3: «Предварительный анализ пунктов»
Предварительный анализ пунктов учебной психодиагностической стандартизованной
методики. Гипотетическая проверка их на соответствие заявленной факторной структуре.
Ввод отобранных пунктов в систему тестирования. Определение выборки
стандартизации. Определение критериев для проверки валидности методики
Тестирование выборки стандартизации.
Семинар 4: «Психометрический анализ теста»
Сырой балл. Выделение крайних групп. Тестовые нормы. Надежность пункта.
Надежность: виды и способы подсчета. Валидность: виды и способы подсчета. Выборка
стандартизации. Репрезентативность. Критерии подбора выборки стандартизации.
Достоверность. Сложность и дифференцирующая сила пункта. Тестовые шкалы. Виды
шкал. Выбор шкалы, адекватной целям исследования. Способы стандартизации:
линейная и табличная. Факторная структура теста. Эмпирическая проверка факторной
структуры.
Основная литература
4. Бодалев А. А., Столин А. В. Общая психодиагностика. СПб.: Речь, 2000. Глава 3
«Психометрические основы психодиагностики», С. 79 – 158.
5. Бурлачук Л.Ф., Морозов С.М. Словарь-справочник по психодиагностике. 2-е изд.,
перераб. и доп. СПб.: Питер, 2005. Определения основных понятий.
6. Шмелев А. Г. Основы психодиагностики. М.; Ростов-на-Дону, 1996. Глава 2
«Методы психодиагностики» С. 131 – 156.
Дополнительная литература
6. Наследов А. Д. SPSS: компьютерный анализ данных в психологии и социальных
науках. СПб, Питер, 2005.
7. Сидоренко Е. В. Методы математической обработки в психологии. СПб.: Речь,
2002.
8. Aron, A., & Aron, E. N. Statistics for psychology (2nd ed.). Upper Saddle River, NJ:
Prentice Hall, 1999.
9. Furr M. R., Bacharach V. R. Psychometrics. An introduction. SAGE Publications Inc.,
2008.
10. VanVoorhis C. W., Morgan B. L. Statistical Rules of Thumb: What We Don't Want to
Forget
About
Sample
Sizes.
University
of
Wisconsin-La
Crosse
(http://www.psichi.org/pubs/articles/article_182.asp)
Семинар
5
«Психометрический
анализ
разрабатываемой
учебной
психодиагностической стандартизованной методики».
Подсчет сырого балла. Выделение крайних групп. Подсчет норм. Анализ надежности
пунктов. Стандартизация полученной методики: линейная и табличная. Проверка
репрезентативности выборки стандартизации. Анализ надежности пунктов. Отбор
пунктов, соответствующих критериальному уровню надежности. Формирование
первичной версии опросника.
Семинар
6:
«Психометрический
анализ
разрабатываемой
учебной
психодиагностической стандартизованной методики».
Проверка валидности учебной психодиагностической стандартизованной методики.
Очевидная валидности. Критериальная валидность. Конструктная валидность. Проверка
7
надежности учебной психодиагностической стандартизованной методики.
надежности – устойчивости. Подсчет коэффициента альфа Кронбаха.
Анализ
Семинар
7:
«Психометрический
анализ
разрабатываемой
учебной
психодиагностической стандартизованной методики».
Факторный анализ: особенности метода. Проверка факторной структуры учебной
психодиагностической стандартизованной методики. Интерпретация эмпирически
выделенных факторов.
Проверка соответствия полученной факторной структуры
задуманной. Создание текстовых описаний результатов теста для всех уровней всех
факторов. Разработка инструкций к тесту для разных групп респондента.
Семинар 8: «Контроль достоверности результатов тестирования»
Способы контроля достоверности результатов тестирования. Контроль социальной
желательности. Контроль самостоятельности респондента. Контроль честности
респондента. Проверка достоверности полученных эмпирических результатов. Виды
мотивации на прохождение теста. Самопознание. Ситуация экспертизы. Помощь.
Исследовательская мотивация. Работа с мотивацией респондента. Мотивационные
искажения и контроль за ними. Этические аспекты работы психодиагноста. Способы
работы с результатами тестирования. Использование результатов тестов в ассессменте.
Принятие кадровых решений на основе данных тестирования. Результаты тестов в
педагогике. Разработка программы исследования с участием созданной методики.
Основная литература:
1. Науменко А. С., Орел Е. А. Использование Интернет-технологий для проведения
психологических исследований. // Отечественная психология в контексте мировой
науки и практики. Сборник статей по результатам работы международной
конференции «Ломоносов» - 2004. М.: МГУ, 2004. – С. 147 – 154.
2. Науменко А. С. Организационная и психологическая эффективность различных
способов предоставления психодиагностической информации. Автореферат дисс.
канд. психол. наук, М.: МГУ, 2008.
4. Ромек В. Г., Сатин Д. К. Сохранение надёжности многофакторных тестов при
их использовании в сети Интернет. // Психологический журнал. 2000. 21 (2). – С.
70-75
Дополнительная литература
5. Джерелиевская М. А., Яшина Л. Л. Этические принципы обратной связи при
глубинном психодиагностическом обследовании. // Современная психодиагностика
в изменяющейся России: сборник тезисов Всероссийской научной конференции.
Челябинск: Издательство ЮурГу, 2008, - С. 43 - 45.
6. Дюк В. А. Компьютерная психодиагностика. СПб.: Братство. 1994
Семинар 9: «Подготовка финальной версии методики».
Создание окончательной версии опросника. Инструкции. Задания. Бланки тестирования.
Описание способа подсчета результатов. Текстовые интерпретации. Сопроводительная
информация о методике. Подготовка тестового буклета.
ЛИТЕРАТУРА
Основная
1. Анастази А. Психологическое тестирование. СПб.: Питер, 2007.
2. Бодалев А. А., Столин А. В. Общая психодиагностика. СПб.: Речь, 2000.
3. Бурлачук Л. Ф. Психодиагностика. СПб.: Питер, 2006.
4. Бурлачук Л.Ф., Морозов С.М. Словарь-справочник по психодиагностике. 2-е изд.,
перераб. и доп. СПб.: Питер, 2005.
5. Шмелев А. Г. Основы психодиагностики. Ростов-на-Дону: Феникс, 1996.
Дополнительная
8
3. Джерелиевская М. А., Яшина Л. Л. Этические принципы обратной связи при
глубинном психодиагностическом обследовании. // Современная психодиагностика
в изменяющейся России: сборник тезисов Всероссийской научной конференции.
Челябинск: Издательство ЮурГу, 2008. – С. 43 – 45.
4. Дюк В. А. Компьютерная психодиагностика. СПб.: Братство. 1994.
5. Наследов А. Д. SPSS: компьютерный анализ данных в психологии и социальных
науках. СПб.: Питер, 2005.
6. Науменко А. С. Организационная и психологическая эффективность различных
способов предоставления психодиагностической информации. Автореферат дисс.
канд. психол. наук, М.: МГУ, 2008.
7. Науменко А. С., Орел Е. А. Использование Интернет-технологий для проведения
психологических исследований. // Отечественная психология в контексте мировой
науки и практики. Сборник статей по результатам работы международной
конференции «Ломоносов» - 2004. М.: МГУ, 2004. – С. 147 – 154.
8. Ромек В. Г., Сатин Д. К. Сохранение надёжности многофакторных тестов при
их использовании в сети Интернет. // Психологический журнал. 2000. 21 (2). – С.
70-75
9. Сидоренко Е. В. Методы математической обработки в психологии. СПб.: Речь,
2002.
10. Собчик Л. Психология индивидуальности. Теория и практика психодиагностики.
СПб.: - Речь, 2003
11. Шмелев А. Г. Песнь о Вещем Олеге и профессиональные предпочтения в области
психодиагностики. // Вестник московского университета. Серия 14. Психология.
2004. – С. 13 – 23.
12. Шмелев А. Г. Психодиагностика личностных черт. СПб.: Речь, 2002.
13. Aron, A., & Aron, E. N. Statistics for psychology (2nd ed.). Upper Saddle River, NJ:
Prentice Hall, 1999.
14. Furr M. R., Bacharach V. R. Psychometrics. An introduction. SAGE Publications Inc.,
2008.
15. VanVoorhis C. W., Morgan B. L. Statistical Rules of Thumb: What We Don't Want to
Forget
About
Sample
Sizes.
University
of
Wisconsin-La
Crosse
(http://www.psichi.org/pubs/articles/article_182.asp).
Тематика заданий по различным формам текущего контроля
Примерные темы для эссе
 Тесты как инструмент психологической диагностики: за и против.
 Этические аспекты работы психолога с результатами тестирования.
 Критерии
отличия
качественного
стандартизированного
теста
от
некачественного.
 Особенности восприятия диагностической информации разными группами
респондентов.
 Психологическое тестирование в системе методов работы психолога-практика.
 Особенности мотивации респондентов в различных ситуациях тестирования.
ВОПРОСЫ К ЗАЧЕТУ
1. Классификации психодиагностических методов.
2. Нестандартизованные психодиагностические методы: особенности и сфера
применения.
3. Стандартизованные психодиагностические методы: особенности и сфера
применения.
4. Основные психометрические характеристики теста.
5. Валидность: понятие и виды.
6. Надежность: понятие и виды.
7. Соотношение надежности и валидности теста.
8. Репрезентативность выборки.
9. Достоверность результатов тестирования. Способы контроля за достоверностью.
10. Виды шкал.
9
11. Сложность и дифференцирующая сила задания.
12. Надежность пункта.
13. Этапы процесса стандартизации методики.
14. Этические нормы работы психолога с психодиагностическими методами.
15. Факторная структура теста: понятие, способы выделения факторов.
Автор программы
(Е. А. Орел)