Показатели эффективности научной деятельности

Индекс Хирша (h-индекс, критерий Хирша) – наукометрический показатель, предложенный в 2005 г. американским физиком Хорхе Хиршем (университет Сан-Диего, Калифорния) в качестве альтернативы классическому «индексу цитируемости», представляющему собой суммарное число ссылок на работы учёного. Критерий основан на учёте числа публикаций исследователя и числа цитирований этих публикаций. Индекс Хирша является количественной характеристикой продуктивности учёного, группы ученых, университета или страны в целом, основанной на количестве публикаций и количестве цитирований этих публикаций.

Индекс вычисляется на основе распределения цитирований работ данного исследователя. Классическое определение индекса Хирша выглядит так: «Учёный имеет индекс h, если h из его N_p статей цитируются как минимум h раз каждая, в то время как оставшиеся (N_p — h) статей цитируются не более чем h раз каждая», то есть учёный с индексом h опубликовал h статей, на каждую из которых сослались как минимум h раз. Индекс Хирша был разработан, чтобы получить более адекватную оценку научной продуктивности исследователя, чем могут дать такие простые характеристики, как общее число публикаций или общее число цитирований. Индекс h дает наиболее адекватную оценку при сравнении учёных, работающих в одной области исследований, поскольку традиции, связанные с цитированием, отличаются в разных отраслях науки (например, в биологии и медицине h-индекс намного выше, чем в физике). Значение индекса Хирша зависит и от возраста самого ученого.

Существуют разные мнения о принятых методиках анализа публикационной активности исследователей, о содержании и качестве баз данных, об объективности тех или иных индексов. Вместе с тем они приняты на вооружение Правительством РФ, Минобрнауки России и используются в мониторинге вузов, в подготовке конкурсной, отчетной и прочей документации. Учет данных показателей в проведении анализа научно-инновационной деятельности организации в целом, научных коллективов и лабораторий и персонально каждого сотрудника является определенным стимулирующим фактором в научной работе. Например, в США учёный, имеющий индекс Хирша h≈100, имеет неоспоримый приоритет в получении грантов, всего таких ученых в мире около десятка. Для российского учёного h=10, по мнению видных ученых, должен быть критерием высокого профессионализма, h4 является показателем, хорошим только для начинающего исследователя. Для сравнения, в Германии, чтобы претендовать на руководящую должность в научной организации, нужно иметь индекс Хирша не ниже 20, а на должность профессора – 10-12. Сам Хирш, например, считает, что в физике (и в реалиях США) h-индекс, равный 10-12, может служить одним из определяющих факторов для решения о предоставлении исследователю постоянного места работы в крупном исследовательском университете; уровень исследователя с h-индексом, равным 15-20, соответствует членству в Американском физическом обществе; индекс 45 и выше может означать членство в Национальной академии наук США.

I-индекс – это наукометрический показатель оценки эффективности деятельности коллектива ученых научной организации. Впервые был предложен в 2006 г. польским ученым М. Космульским и индийским ученым Г. Пратхапом. Научная организация имеет индекс i, если не менее i учёных из этой организации имеют h-индекс не менее i. Таким образом, i-индекс является неотделимым от h-индекса и характеризуется одновременно простотой расчета и высокой значимостью при оценке публикационной активности организации. Чем выше уровень подготовки ученых, осуществляющих научную работу в рамках организации, и, следовательно, их публикационная активность и цитируемость, тем выше i-индекс организации.

Импакт-фактор (IF, ИФ) — численный показатель важности научного журнала. С 1960-х годов он ежегодно рассчитывается Институтом научной информации (англ. Institute for Scientific Information, ISI), который в 1992 г. был приобретен корпорацией Thomson и ныне называется Thomson Scientific и публикуется в журнале «Journal Citation Report». Расчёт импакт-фактора ISI основан на трёхлетнем периоде. Например, импакт-фактор журнала в 2010 году вычислен следующим образом:

IF=A/B,

где A – число цитирований в течение 2010 года статей, опубликованных в данном журнале в 2008 – 2009 годах, в журналах, отслеживаемых Институтом научной информации, B – число статей, опубликованных в данном журнале в 2008 – 2009 годах. При расчёте импакт-фактора (точнее, числа цитирований А) ISI учитывает не все публикации, а только те, которые «могут быть цитируемы» (citable items), то есть исследовательские статьи и научные обзоры. Не учитываются цитирования некоторых типов статей (редакционные заметки, письма в редакцию, новости, отчеты о конференциях, списки опечаток и так далее). В последнее время по подобной методике рассчитывается 5-летний импакт-фактор. Значение импакт-фактора РИНЦ рассчитывается по аналогичной методике; его значение может сильно отличается от ИФ ISI, т.к. при расчете используются разные библиографические базы данных. ИФ РИНЦ известен для 1000 российских журналов, из которых лишь около 100 имеют ИФ ISI.

ИФ журнала зависит от области исследований и его типа; из года в год он может заметно меняться, например, опускаясь до предельно низких значений при изменении названия журнала и т. д. Тем не менее, на сегодня ИФ является одним из важных критериев, по которому можно сопоставлять уровень научных исследований в близких областях знаний. Например, инвестор научного исследования может захотеть сравнить результаты исследователей для оценки перспектив своих инвестиций. Для этого и используются объективные численные показатели, такие как импакт-фактор. Поэтому на подобные измерения существует спрос. Импакт-фактор позволяет по формальным признакам сравнивать разные журналы и исследовательские группы. Импакт-фактор как наукометрический критерий имеет следующие достоинства:

1. Лёгкость понимания и использования.

2. Широкий охват научной литературы (в 2010 г. ISI индексировал свыше 16 500 журналов из более чем 60 стран).

3. Результаты его расчёта публичны и легкодоступны.

4. Учитывается не столько число публикаций, сколько их качество.

5. Фактически проводится международная экспертиза, так как каждая статья перед принятием к публикации анализируется двумя-тремя экспертами.

6. На основании суммарного импакт-фактора за последние годы определяется сила коллектива или отдельного учёного именно в то время, когда выдаётся грант. Расчёт ИФ на одного сотрудника позволяет поддержать небольшие, но продуктивные  группы.

В соответствии с ИФ за рубежом, а в последнее время все больше и в России, оценивают уровень журналов, качество статей, опубликованных в них, дают финансовую поддержку исследователям и принимают сотрудников на работу. В то же время импакт-фактор имеет ряд ограничений и недостатков как технического, так и методологического характера. К последним обычно относят следующие:

1. Число цитирований (как и число публикаций) на самом деле далеко не всегда связано с качеством исследования;

2. Большинство исследователей считает, что 2-летний интервал, в котором учитываются цитирования, слишком мал. Классические статьи часто цитируются даже спустя несколько десятилетий после публикации; кроме того, в журналах с длительным временем публикации статьи часто ссылаются на работы, не попадающие в 3-летний интервал;

3. Для различных областей исследования характерна и различная частота публикации результатов, что оказывает существенное влияние на импакт-факторы журналов (например, в 2003 г. средние импакт-факторы по дисциплинам составили: биология – 5,6, органическая химия – 2,2, математика – 0,5), медицинские же журналы часто имеют импакт-факторы, большие по величине, чем математические. Поскольку журналы с высоким импакт-фактором более привлекательны, в их редакции представляется большее количество значимых и интересных широкой научной общественности работ. Как результат более широкого выбора статей, представленных к публикации, такие журналы имеют (и используют) возможность ещё выше поднять свой рейтинг. Побочным положительным эффектом является ужесточение рецензирования в журналах, получающих работ заведомо больше, чем можно опубликовать.

Солидные зарубежные и отечественные ученые предпочитают публиковаться в журналах с импакт-фактором не меньше 4. К сожалению, российские издания котируются низко, их импакт-фактор, как правило, невелик (десятые балла), поэтому нельзя отказываться от попыток публиковаться в престижных журналах, где сконцентрирована передовая мысль современной международной науки. 

Индекс Херфиндаля-Хиршмана – это в первую очередь экономический показатель, характеризующий степень монополизации отрасли. В целях наукометрии он был модифицирован и в настоящее время используется для оценки широты охвата научных организаций, публикующихся в журнале.

Индекс Херфиндаля-Хиршмана по организациям авторов рассчитывается как сумма квадратов процентных долей количества статей, опубликованных различными организациями, по отношению к общему количеству статей в журнале в текущем году, в которых организация идентифицирована. Максимальное значение равно 100²=10000 и достигается, когда в журнале публикуются авторы только из одной организации. При публикации в журнале 50 статей, из которых 30 принадлежат организации А, а 20 – организации Б, индекс Херфиндаля-Хиршмана будет равен (30/50*100)²+(20/50*100)/²=5200. Чем больше различных организаций, авторы из которых публикуются в журнале, и чем равномернее распределены между ними публикации, тем меньше величина этого показателя.