Методика — предметный рейтинг QS - Проект 5-100

Методика: предметный рейтинг QS World University Rankings
Предметный рейтинг QS ранжирует ведущие мировые университеты
по отдельным предметным областям, покрывая 42 направления в 2016 году.
В предметных рейтингах QS используется четыре индикатора:
академическая репутация и репутация среди работодателей (основанные на
глобальных опросах ученых и работодателей, проводимые QS), количество
цитирований на одну статью и h-индекс (основанные на информации из базы
данных Scopus).
1. Академическая репутация.
Глобальный опрос ученых, проводимый QS, был основой рейтинга
QS с момента его возникновения в 2004 году. В 2016 году предметный
рейтинг QS получил ответы от 76798 ученых по всему миру.
Предоставив свои имена, контактную информацию, звание и
институт/университет, в котором они работают, респонденты обозначили
страны, регионы и научные области, с которыми они наиболее хорошо
знакомы, и до двух узких предметных дисциплин, в которых они считают
себя экспертами. Для каждой (вплоть до пяти) научной области, которую
указали респонденты, необходимо было перечислить до 10 местных (из своей
страны) и 30 зарубежных институтов, которые участники опроса считают
выдающимися в исследованиях в данной области. Эксперты не могли
выбирать свой собственный университет.
Для предметного рейтинга QS результаты опросов фильтруются в
соответствии с узкой предметной областью, указанной респондентами.
Несмотря на то, что ученые могут выбрать до двух узких предметных
областей, в которых они являются экспертами, больший акцент делался на
респондентах, указавших только одну узкую предметную область.
2. Репутация среди работодателей.
Рейтинг QS уникален тем, что в качестве ключевого фактора при
оценке международных университетов он оценивает востребованность
выпускников университетов при устройстве на работу. В 2016 году
1
предметные рейтинги QS получили 44426 ответов от работодателей по всему
миру.
Репутационный опрос среди работодателей основан на той же схеме,
что и опрос ученых, только без разделения по различным научным областям.
Работодателей просят назвать до 10 местных (из своей страны) и 30
зарубежных университетов, которые, по их мнению, выпускают наиболее
востребованных и квалифицированных специалистов. Работодателей также
просят указать, по каким дисциплинам они предпочитают нанимать
выпускников. После анализа ответов экспертов на данные два вопроса,
становится возможным определить меру превосходства университета в
данной дисциплине.
Ответы тех работодателей, для которых неважно, какую дисциплину
изучал
соискатель, берутся с весом 0,1. Ответы работодателей, которые
выбирают
соискателей
из
определенной
широкой
научной
области
(например, социальные науки), берутся с весом 0,25. Ответы работодателей,
которые нуждаются в специалистах из определенной предметной области,
получают вес 2.
Рейтинг QS делает акцент на международной репутации. Поэтому
оценки местных экспертов имеют вес в 2 раза меньше, чем оценки
международных экспертов.
3. Количество цитирований на одну статью.
Из-за невозможности на практике достоверно собрать данные о
количестве сотрудников в разрезе дисциплин, для целей предметных
рейтингов QS замеряется количество цитирований на одну статью, а не на
одного сотрудника.
Минимальный порог публикаций устанавливается для каждой
предметной области, чтобы избежать потенциальных перекосов (аномалий),
происходящих из-за малого количества высокоцитируемых статей. И
минимальный порог публикаций, и весовой фактор, применяемый к
индикатору
цитирований,
учитывают
2
предметную
область,
чтобы
наилучшим образом отразить особенности, характерные для нее и в сфере
публикационной активности, и в сфере цитирований.
Все данные по цитированиям берутся из базы данных Scopus.
4. h-индекс.
С 2013 года в предметных рейтингах QS используется оценка,
основанная
на
h-индексе.
h-индекс
-
это
способ
измерения,
как
публикационной активности ученого, так и влияния/известности его
статей/работ. Индекс учитывает одновременно и количество статей ученого,
и количество цитирований этих статей. Учёный имеет индекс h, если h его
статей цитируются как минимум h раз каждая, а остальные его статьи
цитируются не более, чем h раз каждая.
h-индекс может также применяться к оценке продуктивности и
влиятельности
группы
ученых
(например,
кафедры,
факультета,
университета и т.д.). Этот индекс был предложен Хорхе Хиршем, ученым из
Калифорнийского
университета
в
Сан-Диего,
как
инструмент
для
определения (научного) уровня физиков-теоретиков. Данный индекс, в том
числе, называется индексом Хирша или числом Хирша.
Поскольку такие индикаторы, как «Количество цитирований на 1
статью» и «Индекс Хирша», в значительной степени обусловлены
предметными областями, QS World University Rankings при ранжировании
университетов по различным предметным областям использует различный
вес данных индикаторов. Например, в медицине, где публикационная
активность очень высока, вес цитирований и индекса Хирша соответственно
составляют по 25%; а в истории, где наблюдается не столь значительное
количество публикаций, вес каждого из соответствующих показателей
составляет 15%. В предметных областях, характеризующихся низкой
публикационной активностью (например, дизайн и искусство), рейтинг
основан только на таких индикаторах как академическая репутация и
репутация среди работодателей (Таблица 1).
3
Таблица 1 - Веса индикаторов (показателей) предметных рейтингов QS
Предметный рейтинг
Academic Employer Citations H-index
Reputation Reputation per Paper
Arts & Humanities
70
70
70
90
80
60
80
90
70
75
Anthropology
Archaeology
Architecture
Art & Design
English Language & Literature
History
Linguistics
Performing Arts
Modern Languages
Philosophy
Engineering & Technology
Engineering - Chemical
40
Engineering - Civil & Structural
40
Computer Science & Information Systems
40
Engineering - Electrical & Electronic
40
Engineering - Mechanical, Aeronautical &
40
Manufacturing
Mining Engineering
50
Life Sciences & Medicine
Agriculture & Forestry
50
Biological Sciences
40
Dentistry
30
Medicine
40
Nursing
30
Pharmacy & Pharmacology
40
Psychology
40
Veterinary Science
30
Natural Sciences
Chemistry
40
Earth & Marine Sciences
40
Environmental Sciences
40
Geography & Area Studies
60
Materials Science
40
Mathematics
40
Physics & Astronomy
40
Social Sciences
4
10
10
10
10
10
10
10
10
30
5
10
10
10
0
10
15
5
0
0
10
10
10
10
0
0
15
5
0
0
10
30
30
30
30
30
15
15
15
15
15
15
15
15
15
15
20
15
15
10
10
10
10
10
10
20
10
20
25
30
25
30
25
20
30
20
25
30
25
30
25
20
30
20
10
10
10
10
20
20
20
25
25
15
25
20
20
20
25
25
15
25
20
20
Предметный рейтинг
Academic Employer Citations H-index
Reputation Reputation per Paper
50
30
10
10
50
30
10
10
50
10
20
20
60
10
15
15
40
20
20
20
50
10
20
20
50
30
5
15
50
30
10
10
70
20
10
0
70
10
5
15
50
10
20
20
Accounting & Finance
Business & Management Studies
Communication & Media Studies
Development Studies
Economics & Econometrics
Education
Law
Politics & International Studies
Social Policy
Sociology
Statistics & Operational Research
Для того, чтобы университет стал оцениваться в качестве претендента
на
«попадание»
в
рейтинг,
он
должен
обладать
определенными
характеристиками:
• должен превысить минимальную требуемую оценку для индикаторов
академической репутации и/или репутации работодателей;
• должен превысить пятилетний минимальный порог для количества
статей по данной дисциплине;
• предлагать программы обучения по данной дисциплине для студентов
и аспирантов.
Новое в предметных рейтингах QS в 2016 году
1. Расширение предметных рейтингов с 36 до 42. В 2016 году были также
представлены
рейтинги
«Антропология»
по
следующим
(Anthropology),
предметным
«Археология»
областям:
(Archaeology),
«Инженерное дело в горной промышленности и добыче полезных
ископаемых» (Mining Engineering), «Сестринское дело» (Nursing),
«Исполнительские виды искусства» (Performing Arts), «Социальная
политика» (Social Policy & Administration).
2. Аналогично с общим рейтингом 2015 года - QS World University
Rankings - в предметных рейтингах применяется аффилиационный
фильтр, отсекающий статьи с количеством аффилиаций авторов
5
больше заданного. В связи с критикой метода расчета индекса
цитируемости, в рамках которого из анализа исключаются публикации,
в качестве авторов которых указаны представители более десяти
смежных организаций независимо от предметной области, был
применен фильтр, учитывающий специфику предметных областей.
Теперь выбирается такое предельное значение количества аффилиаций
авторов, чтобы исключенными из анализа оказались менее 0,1% всех
статей в конкретной предметной области (в рейтинге QS World
University Rankings 2015 года в среднем было исключено 0,34% всех
статей).
3. Расширение некоторых предметных рейтингов: «Информатика и
информационные технологии» (Computer Science & Information
Systems) - ТОП-500 (было ТОП-400); «Экономика и эконометрика»
(Economics
&
Econometrics)
-
ТОП-300
(было
ТОП-200);
«Образование» (Education) - ТОП-300 (было ТОП-200) (Таблица 2).
Таблица 2 - Кол-во университетов, представленных в публикуемой части
предметных рейтингов QS
Предметный рейтинг
Кол-во университетов,
представленных в
предметных рейтингах QS
Arts & Humanities
Anthropology
Archaeology
Architecture
Art & Design
English Language & Literature
History
Linguistics
Performing Arts
Modern Languages
Philosophy
ТОП-100
ТОП-100
ТОП-100
ТОП-100
ТОП-300
ТОП-200
ТОП-200
ТОП-100
ТОП-300
ТОП-200
Engineering & Technology
Engineering - Chemical
Engineering - Civil & Structural
Computer Science & Information Systems
Engineering - Electrical & Electronic
Engineering - Mechanical, Aeronautical & Manufacturing
Mining Engineering
Life Sciences & Medicine
ТОП-200
ТОП-200
ТОП-500
ТОП-300
ТОП-300
ТОП-100
6
Предметный рейтинг
Кол-во университетов,
представленных в
предметных рейтингах QS
ТОП-400
ТОП-50
ТОП-400
ТОП-100
ТОП-200
ТОП-200
ТОП-50
Biological Sciences
Dentistry
Medicine
Nursing
Pharmacy & Pharmacology
Psychology
Veterinary Science
Natural Sciences
ТОП-400
ТОП-400
ТОП-300
ТОП-200
ТОП-400
ТОП-200
ТОП-200
Physics & Astronomy
Mathematics
Environmental Sciences
Earth & Marine Sciences
Chemistry
Materials Science
Geography & Area Studies
Social Sciences
ТОП-200
ТОП-200
ТОП-200
ТОП-100
ТОП-300
ТОП-300
ТОП-200
ТОП-200
ТОП-100
ТОП-200
ТОП-200
Accounting & Finance
Business & Management Studies
Communication & Media Studies
Development Studies
Economics & Econometrics
Education
Law
Politics & International Studies
Social Policy
Sociology
Statistics & Operational Research
7