Индексы научного цитирования. Возможности и перспективы в оценке результатов научной деятельности - Ольга Третьякова

Общепризнанно, что основу адекватной оценки эффективности и результативности деятельности научных организаций составляет мнение экспертов о научных результатах, их новизне, актуальности, соответствии целям и задачам инновационного развития страны. В то же время показатели, представленные как в РИНЦ, так и в зарубежных индексах цитирования, весьма динамичны и довольно быстро изменяются. В контексте этого очевидно, что выводы, основанные на таких данных, являются объективными только для определенного временного периода. Кроме того, библиометрические индикаторы не всегда объективно учитывают специфику научной деятельности. Таким образом, для абсолютной оценки научной деятельности отдельных ученых и учреждений в целом данные индексов цитирования могут использоваться в качестве вспомогательных, основным же способом для анализа качества научно-исследовательского проекта или отдельного ученого должна быть экспертная оценка, которая в первую очередь учитывает научное содержание работы.

1.3. РИНЦ как инструмент оценки научного потенциала территории

Стоящие перед учеными задачи по интеграции в мировое научное пространство требуют сегодня новых подходов к распространению и продвижению результатов исследований, а также современных инструментов для оценки результативности деятельности научных организаций и эффективности научного потенциала территорий.

Сама категория «научный потенциал» и методы его оценки в последние годы находятся под пристальным вниманием научного сообщества. Ряд исследователей полагают, что при оценке научного потенциала организации целесообразно использовать ресурсную и результативную составляющие, т. е. не только ресурсные индикаторы деятельности научных учреждений, но и индикаторы, отражающие результат использования (востребованности) ресурсного потенциала, иными словами, показатели признания результатов научной деятельности организации научной общественностью[12].

В качестве одного из инструментов оценки результатов научной деятельности могут рассматриваться показатели индексов научного цитирования. Публикационная активность, отражающая исследовательскую результативность в публичном пространстве, становится конкурентным преимуществом организации и ее научного коллектива на рынке исследований и разработок в сегменте соответствующих приоритетных научных направлений.

В проекте, разработанном Минобрнауки по поручению Президента РФ В. В. Путина, предлагается система оценок работы научных организаций, ориентированная на западные аналоги. Это, в частности, число публикаций в международных базах цитирования, а также обзоры и тезисы конференций, монографии, конструкторская и технологическая документация, различные стандарты, регламенты, результаты интеллектуальной деятельности, финансовая результативность научной организации. Еще одна группа критериев – число статей, подготовленных совместно с зарубежными учеными, опубликованных в международных журналах; число проведенных организацией международных конференций. Одновременно планируется учет количества положительных и нейтральных упоминаний о научной организации в СМИ и посещаемости официальных сайтов учреждений в Интернете.

Возвращаясь к вопросу о применении данных о публикационной активности организаций для оценки результатов научно-исследовательской деятельности, необходимо отметить следующее. Использование этих показателей не дает объективной картины для оценки научной деятельности российских ученых, поскольку их публикации слабо представлены в международных базах. Кроме того, затруднено и использование показателей международных баз данных применительно к оценке публикационной активности российских регионов. Это обусловлено тем, что региональные научные журналы, которые играют существенную роль в создании научных приоритетов развития фундаментальных исследований в субъектах Российской Федерации и в полной мере отражают их специфику, практически не представлены в ведущих мировых индексах цитирования.

В этой ситуации вопрос о разработке национального индекса цитирования как альтернативы зарубежным наукометрическим ресурсам приобрел особую актуальность.

На наш взгляд, показатели Российского индекса научного цитирования можно использовать в качестве первичной оценочной характеристики деятельности отдельных ученых и учреждений в целом. Учитывая это, мы применили показатели РИНЦ для оценки публикационной активности научных организаций и учреждений высшего образования Вологодской области. С помощью такого подхода можно проводить оценку эффективности научно-исследовательской деятельности организаций и обозначить их вклад в развитие научного потенциала региона.

При оценке публикационной активности научных организаций Вологодской области использовались библиографические показатели Российского индекса научного цитирования за последние пять лет (2009–2013 гг). Оценка проводилась по 10 научным учреждениям и вузам области, имеющим профили в РИНЦ.

Как видно из данных таблицы 3, общее количество зарегистрированных в РИНЦ публикаций научно-исследовательских организаций и вузов Вологодской области за 2009–2013 гг. составило 4906 ед., из них 74 % приходится на долю трех учреждений: Вологодский государственный университет – 1444 публикации (29,4 %), Череповецкий государственный университет – 1265 (25,8 %), Институт социально-экономического развития территорий РАН – 922 (18,8 %).

В целом за анализируемый период научные организации региона обеспечили существенный прирост абсолютного количества статей в РИНЦ – с 725 в 2009 году до 1278 в 2013 году, т. е. в 1,8 раза (темп роста – 176 %).

Таблица 3. Общие показатели числа публикаций научно-исследовательских организаций и вузов Вологодской области в РИНЦ (данные НЭБ на 10.10.2014)

Как оказалось, 55 % публикаций научных организаций и вузов Вологодской области за период 2009–2013 гг. составляют статьи в журналах, входящих в Перечень ВАК, и 5,2 % – в журналах, которые, индексируются в базах данных Web of Science или Scopus. Эти существенные значения характеризуют публикационную активность научных организаций региона не только в количественном, но и в качественном аспекте.

Представленные в РИНЦ данные позволяют сделать акцент на таком важном направлении научной деятельности, как проведение совместных исследований с зарубежными коллегами. К сожалению, доля публикаций в вологодских научно-исследовательских учреждениях с участием зарубежных организаций в общем числе их публикаций в РИНЦ за 2009–2013 гг. составляет только 0,7 %.

В таблице 4 приведено ранговое распределение учреждений науки и высшего образования региона по частоте цитирования их публикаций в РИНЦ за указанный период. Ранжирование выполнено по общему количеству цитирований всех публикаций в РИНЦ (по данным НЭБ на 10.10.2014). Судя по результатам анализа библиометрических показателей, основная доля цитирований (89 %) приходится на публикации Института социально-экономического развития территорий РАН – 1335 цитирований (41,7 %); Вологодского государственного университета – 1050 (32,8 %), Череповецкого государственного университета – 464 (14,5 %). Стоит отметить, что среднее число цитирований ИСЭРТ РАН за 2009–2013 гг. в расчете на одну публикацию составило 1,4, что почти в два раза превышает аналогичные показатели ВоГУ (0,7) и почти в четыре раза – ЧГУ (0,4).

Самое высокое значение среднего числа цитирований в расчете на одну публикацию за указанные годы имеет Череповецкий военный инженерный институт радиоэлектроники – 3,7. Хотя это во многом обусловлено низким значением показателя общего количества публикаций организации в РИНЦ (11), используемого при расчете среднего числа цитирований на одну публикацию.

Таблица 4. Показатели цитирования публикаций научно-исследовательских организаций и вузов Вологодской области в РИНЦ (данные НЭБ на 10.10.2014)

С целью уточнения и углубления оценки публикационной активности организаций, основанной на данных о цитировании, в таблице приведены также значения индекса Хирша (h-индекс).

Согласно данным РИНЦ, среди научно-исследовательских организаций и вузов Вологодской области только три учреждения имеют значение индекса Хирша равное 10 и выше. К ним относятся Институт социально-экономического развития территорий РАН (h-индекс – 13), Вологодский государственный университет (h-индекс – 13) и Череповецкий государственный университет (h-индекс – 10). Наукометрическая отечественная практика признает такие значения индекса Хирша как свидетельства устойчивости качества научной продукции исследовательского коллектива. Остальные организации имеют значения h-индекса 5 и ниже.