Рейтинги российских журналов по экономике

Рейтинги
российских журналов по экономике:
сравнительный анализ
Муравьев Александр Александрович
Департамент экономики НИУ ВШЭ в Санкт-Петербурге и
Институт трудовых исследований (IZA, Bonn)
1
Постановка проблемы
•
В России несколько сотен научных журналов, публикующих
статьи по экономической тематике (относимых РИНЦ к категории
«Экономика. Экономические науки»), в том числе более сотни
«ведущих» научных журналов списка ВАК.
•
Российские журналы в целом мало востребованы в мире и
имеют низкий международный рейтинг.
•
Вопрос о дифференциации российских журналов по экономике:
есть ли среди них достойные по международным меркам
издания?
•
Импакт-фактор РИНЦ, а тем более список ВАК, как мерила
качества журналов несовершенны.
2
Классификаторы/рейтинги журналов

Широко распространены в мире в отдельных дисциплинах (экономика,
другие общественные науки).

Полезны при принятии решений о найме и продвижении по карьерной
лестнице, при принятии решений о вознаграждении сотрудников.

Внутренний и внешний аудит исследовательских организаций. С
помощью классификатора/рейтинга журналов заметно упрощается
оценка результатов научной деятельности.

Информация для исследователей (особенно молодых и меняющих
специализацию) о том, в каких журналах следует публиковаться.

Информация для библиотек о том, на какие журналы следует
оформлять подписку, а на какие – нет.
3
Рейтинги экономических журналов в
России
В последние годы России появилось несколько рейтингов
экономических журналов. Наиболее известны три:




рейтинг Муравьева (2013), «Вопросы экономики» №4 2013,
рейтинг Управления Академической Экспертизы НИУ ВШЭ (2014-2015),
http://grant.hse.ru/public/data/brochure.docx,
http://www.hse.ru/academexpert/journals
рейтинг Балацкого (2015), http://nonerg-econ.ru/cat/9/8/.
В основе этих рейтингов – разные методологические подходы,
каждому из которых присущи серьезные недостатки.
Но: все три рейтинга дают достаточно компактный список из двух
десятков (+/-) журналов, могущих претендовать на заметную роль в
науке.
Цель работы – сопоставить полученные разными методами
результаты и попытаться получить на основе имеющихся трех
рейтингов некую обобщенную картину, интегральный рейтинг
российских журналов по экономике и смежным дисциплинам.



4
Рейтинг Муравьева (2013)
Опирается исключительно на библиометрическую информацию,
доступную на сайте НЭБ/РИНЦ по состоянию на конец 2012 г.
Проанализировано 215 журналов и более 50 тыс. статей.
Помимо стандартных (напр., ИФ), применены показатели, специально
рассчитанные автором на основе списков литературы опубликованных
в журналах статей (среднее число ссылок на международные научные
журналы, средний возраст цитируемых источников и т.п.).
Всего использовано 14 показателей, которые путем стандартизации и
агрегирования были сведены в пять обобщенных рангов.
Результатом работы стало выделение 24 ведущих журналов по
экономике и смежным дисциплинам, из которых 10 были отнесены к
условной категории «А» (наиболее значимые), а остальные – к
категории «В» (журналы хорошего уровня).
Анализ также показал непригодность стандартных показателей РИНЦ,
в том числе импакт-фактора, для оценки качества журналов.






5
Рейтинг Управления академических
исследований НИУ ВШЭ (2015)
Опирается на экспертные оценки.
 Сначала составлены стартовые списки журналов на основе данных РИНЦ.
Далее сформирован (с помощью сложной процедуры, детали которой
раскрыты авторами рейтинга) список экспертов (52 по экономике, 38 по
менеджменту).
 Экспертам была предложена анкета, позволяющая оценить научный
уровень журналов из стартового списка (важно, что в ходе эксперты
получили право самостоятельно дополнять списки журналов).
 По результатам анкетирования экспертов с помощью агрегирования
индивидуальных оценок были выделены три условные группы журналов:
A1 – высокий уровень, «широкий профиль», A2 – высокий уровень,
«узкий профиль», B – средний уровень.
 Всего было идентифицировано 2 журнала группы А2 по экономике и 17
журналов группы В. По менеджменту было выделено 3 журнала группы
А2 и 6 журналов группы В. Журналов А1 не обнаружено.
 Всего в группы А2 и В попало 25 журналов по экономике и менеджменту.
6

Рейтинг Балацкого (2015)
Сочетает методы, использованные в двух предыдущих рейтингах
(библиометрические данные + экспертные оценки).
На первом шаге формируется список экономических журналов по базе
НЭБ/РИНЦ. Этот список затем упорядочивается по нескольким
показателям, рассчитываемым РИНЦ.
На втором шаге журналы проходят экспертизу по пяти качественным
параметрам. Задействовано три эксперта. Экспертиза в два этапа, при
которой каждый эксперт сначала давал независимую оценку
журналов, а на втором этапе эксперты открыто обсуждали и
согласовывали оценки (устраняет индивидуальные ошибки).
На третьем этапе было проведено агрегирование рейтинга РИНЦ и
экспертных оценок. Результатом стал список журналов,
упорядоченный по их академическому весу (интегральный индикатор,
представляющий собой действительное число). Данные представлены
для 50 первых позиций, при этом в отличие от двух первых рейтингов
автор не проводит разделения на категории А, В и т.д.




7
Слабые стороны трех рейтингов

Муравьев (2013): неотфильтрованы мультидисциплинарные журналы;
использованные библиометрические показатели неидеально отражают
научную значимость журнала.

УАЭ НИУ ВШЭ (2015): Селекция экспертов. Если (хорошие) эксперты не
просматривают/не читают какой-то (плохой) журнал, то они его не
оценивают (вопросы о качестве журнала пропускаются). Правильнее
было бы просить/заставить всех экспертов прочитать и оценить 1-2
номера журнала.

Балацкий (2015): экспертные оценки выставлены только тремя
анонимными экспертами (высока роль индивида); число
задействованных библиометрических показателей (5) очень мало.

Во всех рейтингах использованы произвольные точки отсечения
(хороших журналов от плохих).
8
Два допущения
Во-первых, поскольку за исключением рейтинга УАЭ НИУ ВШЭ
экономика и менеджмент не выделены в отдельные поддисциплины,
нам приходится анализировать эти области вместе, как «экономика и
менеджмент» или «экономика и смежные области знания». Иными
словами, нам приходится объединить списки ведущих журналов по
экономике и менеджменту рейтинга УАЭ НИУ ВШЭ.
Во-вторых, рейтинг Балацкого содержит 50 журналов, при этом не
разделяет журналы на категории А, В и т.д., а упорядочивает их по
интегральному индексу (действительное число). С целью достижения
сопоставимости с данными Муравьева и УАЭ НИУ ВШЭ были выбраны
первые 35 журналов списка, при этом первые 15 отнесены к условной
категории А, а оставшиеся 20 – к условной категории В.
Итого в анализ включены 24 издания рейтинга Муравьева, 25 изданий
рейтинга УАЭ НИУ ВШЭ, 35 изданий рейтинга Балацкого. Всего 50
журналов.



9
Анализ


Исключаем журналы, оказавшиеся только в одном из трех исходных
списков, как не могущие претендовать на высокий интегральный
рейтинг (как правило, это - локальные издания, узкоспециализированные или же издания, для которых экономика/менеджмент
являются побочной областью).
В результате в усеченном списке остается только 22 журнала, входящих
по меньшей мере в два из трех рейтингов. Они классифицированы
следующим образом:



10
Интегральная оценка А+: журналы, включенные во все три рейтинга и
получившие во всех трех оценку «А»
Интегральная оценка А: не попавшие в категорию А+ журналы, включенные
во все три рейтинга и получившие минимум 2 рейтинга «А»
Интегральная оценка В: остальные журналы (включенные во все три
рейтинга и получившие оценки А В В или В В В), включенные в два рейтинга
и получившие оценки А и В или В и В).
Журналы категорий А и В (22)
Журнал
Российский журнал менеджмента
Экономический журнал Высшей школы экономики
Вестник Санкт-Петербургского университета. Серия
8: Менеджмент
Вопросы экономики
Журнал новой экономической ассоциации
Прикладная эконометрика
Форсайт
Экономика и математические методы
Экономическая наука современной России
Вестник Московского университета. Серия 6:
Экономика
Инновации
Менеджмент в России и за рубежом
Мировая экономика и международные отношения
Общество и экономика
Проблемы прогнозирования
Проблемы теории и практики управления
Проблемы управления
Пространственная экономика
Регион: Экономика и Социология
ЭКО
Экономическая политика
Terra Economicus
11
Муравьев
(2013)
A
A
УАЭ ВШЭ
(2015)
A2
A2
Балацкий
(2015)
А
А
B
A2
А
A
A
A
A
A
A
A
B
B
B
A2
B
B
А
А
А
B
А
А
A
A
A
A
A
A
---
B
B
B
----B
--B
B
B
B
B
--B
B
B
B
--B
B
B
--B
B
B
B
---
B
B
А
А
А
B
B
А
--B
--A
B
B
B
B
B
B
B
B
B
B
B
B
Общий
A+
A+
Остальные журналы (28)
Журнал
12
Аудит и финансовый анализ
Вестник Воронежского государственного
университета. Серия: Экономика и управление
Вестник Института экономики РАН
Вестник Санкт-Петербургского университета. Серия
5: Экономика
Вопросы образования
Вопросы оценки
Дайджест-финансы
Деньги и кредит
Журнал экономической теории
Корпоративные финансы
Маркетинг
Маркетинг в России и за рубежом
Общественные науки и современность
Проблемы современной экономики
Региональная экономика: теория и практика
Российский внешнеэкономический вестник
Российский экономический журнал
Университетское управление: практика и анализ
Управление большими системами: сборник трудов
Уровень жизни населения регионов России
Финансы и кредит
Экономика и управление
Экономика региона
Экономист
Экономическая социология
Экономический анализ: теория и практика
Harvard Business Review Россия
Journal of Institutional Studies
Муравьев
(2013)
---
УАЭ ВШЭ
(2015)
---
Балацкий
(2015)
B
---
---
B
---
---
B
---
---
---
---
B
---
B
------B
B
B
--------B
----A
----------В
-------
----------------B
------B
----B
------B
----B
---
--B
B
A
------B
--B
B
----B
----B
B
B
----B
--А
-------------------------------------------------
Общий
---
Результаты (1)


Три имеющихся рейтинга существенно пересекаются.
Вместе с тем, в каждом рейтинге заметно множество выбросов
(мультидисцилинарные, узкоспециализированные, локальные издания).



13
Из 24 журналов рейтинга Муравьева, в интегральный попадают 17.
Из 25 журналов рейтинга УАЭ НИУ ВШЭ в в интегральный попадают 19.
Из 35 журналов (усеченного) рейтинга Балацкого – 20 журналов.
Результаты (2)




Только два журнала можно отнести к условной категории А+
интегрального рейтинга. Это – «Экономический журнал Высшей школы
экономики» и «Российский журнал менеджмента», новые журналы,
издаваемыми новыми институтами (НИУ ВШЭ и ВШМ СПбГУ).
Семь журналов категории А – хорошо известные издания, за
исключением «Вопросов экономики» и «Экономики и математических
методов» – это новые издания, появившиеся в конце 1990-х – 2000-х
годах.
В категории В также преимущественно хорошо узнаваемые издания.
Скопус индексирует 3 издания, из которых один из списка А (Форсайт),
один из списка В (Проблемы прогнозирования) и один не входящий ни в
А, ни в В (Экономика региона).
14
Итоги




В России около десятка хороших журналов по экономике и смежным
дисциплинам и около двух десятков приличных журналов в этих
областях.
Названия этих журналов (теперь) широко известны.
Именно на них следует ориентироваться исследователям,
стремящимся познакомить научную общественность с результатами
своих исследований.
Именно на публикации в этих журналах следует ориентироваться
руководству экономических факультетов ВУЗов при принятии кадровых
решений.
15