
Cite: Udartseva O. M. Altmetric functions of foreign current research information systems (CRIS-systems) // Scientific and technical libraries. 2024. No.  2, 
pp. 123–141. https://doi.org/10.33186/1027-3689-2024-2-123-141

    
Введение
    Новые каналы распространения информации и формирующиеся принципы открытости способствует повышению видимости результатов научной деятельности в сети. Я. Л. Шрайберг справедливо отмечает неизбежность этого процесса [1]. Открытый доступ ускоряет обмен научными результатами, что в свою очередь положительно влияет не только на учёных, но и на издателей и научное сообщество в целом. 
В связи с этим для оперативной оценки значимости и популярности результатов научных исследований увеличивается спрос на альтернативные традиционным (библиометрическим) метрикам альтметрические или альтернативные метрики. «Альтметрики – это новые методы наукометрии, которые оценивают результаты исследовательской деятельности не на основе числа цитирований публикаций в научных журналах (академический вес, scholarlyimpact), а по их присутствию, упоминанию и использованию в интернете и традиционных СМИ (общественный вес, socialimpact)» [2]. Эти новые методы измерения активно развиваются с 2010 г., с момента появления «Манифеста альтметрики» [3].
    Можно выделить четыре группы информационных продуктов, на площадке которых встроены альтернативные метрики:
    информационные поисковые ресурсы (РИНЦ, ScienceOpen, Scopus, Web of Science, Dimensions, MDPI, Zenodo, «Вернский» и т. п.);
    научные (академические) соцсети (Academia.edu, Mendeley, Research Gate, SciPeople и т. п.);
    платформы журналов и издательств;
    информационные системы текущих исследований (Current Research Information Systems – CRIS).
    Первые три группы источников довольно часто попадают в поле зрения авторов в качестве исследовательской базы, в том числе для изучения альтметрических возможностей. Тогда как информационные системы текущих исследований (CRIS), которые специально разрабатываются для сбора и хранения результатов исследовательской деятельности конкретного научного учреждения, с этой целью ранее не изучались. Именно поэтому данные ресурсы взяты для анализа встроенных возможностей альтметричекой оценки. Цель статьи – анализ опыта применения альтметрического функционала на платформах зарубежных СRIS при оценке результатов научной деятельности.
Тенденции развития альтметрики 
и показатели альтернативной оценки
    Для определения динамики развития альтметрических исследований проведён наукометрический анализ отечественных и зарубежных публикаций с 2010 по 2022 г. (рис. 1) Источником для изучения публикационной активности в области альтметрии стали аналитические информационные системы РИНЦ (eLIBRARY) и Dimensions. В качестве поискового предписания для запроса в информационных системах использовалось ключевое слово «altmetrics». До 2020 г. количество исследований по теме альтметрии стабильно растёт. Однако в последние два года отражённое число публикаций в Dimensions несколько снизилось, что может быть связано с отсрочкой их появления в аналитической информационной системе либо со снижением интереса 
к этой теме среди преимущественно зарубежных исследователей. Общее количество проиндексированных в Dimensions документов составило порядка 12 024, в РИНЦ – 337.
    Методы альтметрии изучались с целью определения дальнейшей перспективы их применения. Среди зарубежных исследователей в области альтметрии, по статистическим данным Dimensions, наибольший отклик от научного сообщества получили публикации M. Thelwall (University of Wolverhampton, Англия) [4, 5], L. Bornmann (Max Planck Society, Германия) [6], R. Costas (Leiden University, Нидерланды) [7], R. Haunschild (Max Planck Institute for Solid State Research, Германия) [8], S. Haustein (University of Ottawa, Канада) [7]. По данным РИНЦ (eLIBRARY), среди работ российских авторов по числу цитирований можно выделить: коллективный труд М. А. Акоева, В. А. Маркусовой, 
О. В. Москалевой, В. В. Пислякова [9], публикации Г. Ф. Гордукаловой [10], Т. В. Бусыгиной [11], А. И. Земскова и К. А. Колосова [12], 
М. А. Юревич и И. П. Цапенко [13].

Рис. 1. Количество публикаций по альтметрике, 
проиндексированных с 2010 по 2022 г. 
в информационных системах РИНЦ (eLIBRARY) и Dimensions
    Авторы проводят альтметрические исследования отдельных тем [14] либо областей знания, в частности акцентируется внимание 
на статьях и книгах гуманитарной и социальной тематики [15, 16]. 
Альметрические данные, полученные ими в результате исследования, показали, что открытый доступ существенно влияет на обмен публикациями и повышение их значимости.
    При изучении влияния публикаций в сети в поле зрения исследователей попадают альтернативные метрики. Показатели альтметрической оценки представляют собой количественную характеристику, отражающую взаимодействие пользователей с результатами исследовательской деятельности учёного. Важным преимуществом альтернативных метрик является использование для оценки научных результатов не только академического показателя «цитирование», сбор которого осуществляется из разных информационных ресурсов (CrossRef, Scopus, Web of Science и т. д.), но и показателей социальной оценки, которые несут коммуникационную нагрузку.
    Проводится сравнительный анализ традиционных (библиометрических) и альтерантивных (альтметрических) показателей. Традиционные метрики (цитирование, индекс Хирша), которыми принято оценивать результаты интеллектуального труда, имеют ряд недостатков: 
с одной стороны, отсроченный по времени эффект, а с другой – не всегда прозрачную технологию подсчёта, учитывая, что показатели могут меняться в зависимости от используемой базы данных [13, 17]. 
При этом применение альтернативных показателей позволяет отслеживать внимание к результатам интеллектуального труда в режиме реального времени [18].
    Важными преимуществами альтметрик являются [18, 19]:
    оперативность появления альтернативных метрических данных,
    открытость размещаемых данных,
    широкий охват источников для сбора данных (новости, блоги, соцсети, мессенджеры ссылок),
    разнообразие альтметрической информации (захват (сохранение в закладки, избранное, в мессенджер ссылок), реакция в соцсетях (твиты, лайки, репосты, комментарии), цитирование в информационных ресурсах (CrossRef, Scopus, Web of Science, Dimensions и т. д.), использование (клики, просмотры, загрузка, выдача через фонд библиотеки)).
    Некоторые исследователи с недоверием относятся к альтернативным метрикам. Сомнение вызывает прозрачность расчёта альтметрических показателей; отмечается, что оценка результатов исследований во многом зависит от искусственного интеллекта [20].
    Библиотеки не отстают от новых тенденций, начинают активно использовать альтернативные метрики на практике. Авторы [21] отмечают, что при расчёте альтметрических показателей также можно использовать обращения к электронным каталогам библиотек (просмотры библиографических описаний) и учёт загрузки файлов полнотекстовых документов в формате PDF и их просмотр при наличии соответствующего режима пролистывания страниц. На практике реализован анализ популярных запросов в электронном каталоге ГПНТБ России и составлены рейтинги популярных авторов, тем, типов изданий [21–23]. 
Применение в электронных каталогах библиотек технологии WEB 2.0 предоставляет возможность получения обратной реакции от читателя (комментарии, рекомендации) [24]. Этот показатель также является альтметрическим и позволяет оценить внимание читателя к тем или иным документам. Возможности альтметрики внедряются и в электронных научных библиотеках [25].
    Собираемые альтметрические данные также содержат информацию о том, кто проявляет интерес к этим результатам. В частности с помощью альтернативных метрик можно оценивать профессиональную принадлежность пользователя (аспирант, учёный, медицинский работник и т. д.), в качестве источника выступают данные Mendeley [26]. Таким образом, анализ литературы доказывает, что альтметрика является альтернативным способом измерения внимания и значимости результатов научной деятельности в сети.
Поставщики альтметрических данных
    Альтернативные показатели агрегируются специально созданными сервисами. Один из первых сервисов, созданных для отслеживания показателей воздействия научных исследований, – Lagotto – разработан PLOS в 2009 г. В 2011 г. начали свою деятельность Altmetric.com и Plum Analytics, которые на сегодняшний день являются крупнейшими поставщиками альтметрических данных. Вслед за ними появились и другие сервисы – Impact Story (2012), Crossref Event Data (2018). Внешними источниками для поставщиков альтметрических данных являются различные каналы: новости, блоги, соцсети, мессенджеры ссылок. Поэтому каждый сервис предлагает собственный «уникальный» набор альтметрических показателей.
    Сервис Lagotto (www.lagotto.io) собирает и агрегирует данные из внешних источников. Источниками данных для Lagotto являются сервисы CiteULike, Mendeley, соцсети (Twitter, Facebook, Reddit), а также PubMed Central, Scopus и т. д. Альтернативные показатели, которые агрегирует этот сервис, связаны с распространением публикаций и использованием результатов научных исследований [29]: просмотры и загрузки (журналы PLOS, PubMed Central, Figshare), сохранение и закладки с использованием сервисов по управлению ссылками (Mendeley, CiteULike), обсуждение в соцсетях и медиа (блоги, Wikipedia), цитирование (Scopus, PubMed Central, Web of Science, CrossRef, PMC Europe, Database Links); рекомендации (F1000Prime).
    Altmetric.com предлагает несколько бесплатных инструментов для исследователей («Альтметрический букмарклет», «Альтметрические значки» и «Альтметрический API»). «Альтметрический букмарклет» – приложение, позволяющее просматривать альтметрические данные для любой публикации с DOI. «Альтметрические значки» – бесплатный виджет для визуализации результатов научных исследований на странице собственного профиля учёного. «Альтметрический API» – предоставление конкретному API-адресу доступа к альтметрическим данным базы Altmetric.com, где представлено более 9 млн результатов исследований [30]. Сервис Altmetric.com выделяет и собирает несколько групп метрик:
    метрики, оценивающие внимание: упоминания в новостях, соцсетях и блогах, а также сохранение в закладки, просмотры и загрузки;
    метрики распространения: репосты и обсуждения;
    метрики воздействия или общественной значимости: ссылки 
в государственных документах (программы, постановления).
    Plum Analytics [31] к альтметрической оценке предлагает пять групп показателей:
    цитирование (цитирование в информационных ресурсах CrossRef, Scopus, Dimensions, а также сбор данных о цитатах в государственных документах, патентах и т. д.);
    захваты (сохранение в закладки и избранное, сохранение в мессенджер ссылок),
    соцсети (реакция в соцсетях: репосты, твиты, лайки, комментарии);
    использование (клики, просмотры, загрузка, воспроизведение видео, выдача через фонд библиотеки);
    упоминания (посты в блогах, упоминания в новостях, обзорах, 
в Wikipedia).
    Сервис Impact Story разработан некоммерческой организацией OurResearch [32]. Он собирает данные о просмотрах, реакции в соцсетях (Twitter, Facebook), об упоминании в блогах и новостях, сохранении в закладки, цитировании (DataCite, Crossref).
    Crossref для расширения влияния результатов научных исследований разработали Crossref Event Data (CrossRef ED) [33], который фиксирует упоминания и обсуждения в соцсетях (Reddit, Twitter), новостях, блогах и на сайтах Wordpress.com, а также цитирование публикаций. 
В отличие от Lagotto, Altmetric.com и Plum Analytics CrossRef ED не собирает данные о реакциях и упоминаниях в Facebook, данные о читательской аудитории Mendeley.
    Некоторые исследователи, основываясь на том, что существующие агрегаторы предоставляют разные наборы, ставят под сомнение надёжность альтернативных метрик [34]. Учитывая, что, во-первых, все рассматриваемые поставщики альтметрических данных являются зарубежными, агрегирование показателей осуществляется только из зарубежных источников, что препятствует оценке результатов российских исследований, а, во-вторых, в связи со сложившейся политической ситуацией поставщики альтметрических данных отказывают в установке плагина на российские информационные ресурсы. В частности, такой отказ был получен от Altmetric.com ГПНТБ СО РАН в мае 2023 г.
Методика исследования
    Основная часть исследования сосредоточена на альтметрических возможностях зарубежных информационных систем. Их выборка осуществлялась на основании списка мировых CRIS-систем, вошедших в вебометрический рейтинг (февраль 2023 г.), который представлен на сайте Ranking Web of Repositories [27]. Всего в рейтинге 248 CRIS. Сначала были собраны электронные адреса информационных систем. Первые результаты мониторинга показали, что 34 (13,7%) CRIS-платформы недоступны. Сложно сказать однозначно, что является основной причиной отсутствия доступа. Это может быть связано как с банальными техническими проблемами и сбоями, так и с рестрикциями – ограничением доступа к ресурсам для пользователей из России, что сейчас, в связи с текущей политической ситуацией, не редкость [28]. Сбор данных осуществлялся весной 2023 г. по 214 CRIS из 43 стран мира (США, Великобритания, Дания, Китай, Нидерланды, Польша, Россия и др.), платформы которых были открыты для анализа (см. табл.). Внимание акцентировалось на встраиваемых в CRIS-системы альтметрических показателях.

Таблица 1
География CRIS (февраль 2023 г.)
№ 
п/п
Страна
Количество 
CRIS, 
вошедших 
в рейтинг
№ 
п/п
Страна
Количество CRIS, 
вошедших 
в рейтинг
1
Австралия
9
23
Объединённые Арабские Эмираты
1
2
Австрия
5
24
Оман
1
3
Бельгия
3
25
Перу
10
4
Ботсвана
1
26
Польша
6
5
Великобритания
26
27
Португалия
2
6
Германия
3
28
Республика 
Индонезия
2
7
Гонконг
6
29
Россия
2
8
Дания
11
30
Саудовская Аравия
1
9
Израиль
3
31
США
35
10
Индия
1
32
Тайвань
7
11
Ирландия
1
33
Турция
9
12
Испания
5
34
Фарерские острова
1
13
Италия
1
35
Финляндия
3
14
Казахстан
1
36
Чехия
2
15
Кипр
1
37
Чили
4
16
Китай
7
38
Швейцария
1
17
Колумбия
3
39
Швеция
3
18
Корея
2
40
Эквадор
1
19
Латвия
1
41
ЮАР
1
20
Люксембург
2
42
Южная Корея
5
21
Мексика
2
43
Япония
10
22
Нидерланды
13
44
Всего
214
    
    
    В большом количестве в рейтинге представлены CRIS (35 – 16,4%) университетов разных штатов США (Pennsylvania State University Research Database, Illinois Experts University of Illinois Urbana-Champaign, Experts University of Minnesota, Johns Hopkins University Expertise Portal, Northwestern Scholars Northwestern University и т. д.).
Альтметрические данные зарубежных CRIS
    CRIS отражают данные о научных проектах, источниках финансирования, сотрудниках и результатах их исследовательской деятельности (публикации, монографии, диссертации, патенты и т. д.). Применение альтметрического функционала является важной составляющей для оценки интереса к результатам научной деятельности в реальном времени.
    Исследование показало, что альтметрические возможности используются на платформах 184 (86%) зарубежных CRIS. В качестве источника альтернативных данных, как правило, применяются показатели двух крупнейших агрегаторов – Altmetric.com и Plum Analytics. Методика сбора данных поставщиков альтметрической информации не раскрывается, являясь их коммерческой тайной. Для сбора альтметрических данных в комплексе оба агрегатора используют 143 зарубежных научных учреждения. Altmetric.com встроен на 162 CRIS, Plum 
Analytics – на 156 (рис. 2), тогда как порядка 14% зарубежных научных учреждений не используют альметрические показатели как источник оценки интереса к результатам исследовательской деятельности.

Рис. 2. Альтметрический функционал зарубежных CRIS
    Учитывая, что сбор альтметрических данных осуществляется с применением Altmetric.com и Plum Analytics, показатели собираются из разных наборов данных (из соцсетей и медиа, данных о влиянии и использовании). В соответствии с этим можно выделить три группы собираемых показателей:
    социальные метрики (твиты, лайки, репосты, комментарии);
    метрики влияния (сохранение в закладки и избранное, цитирование из разных информационных ресурсов, соответствие одной из целей устойчивого развития);
    метрики использования (клики, просмотры, загрузка, выдача через фонд библиотеки).
    Социальные каналы, основной задачей которых является взаимодействие с другими пользователями, позволяют не только просматривать и цитировать публикацию, но и делиться собственными впечатлениями, рекомендовать или не рекомендовать работу, обсуждать научное исследование с коллегами. Altmetric.com и Plum Analytics согласно данным, полученным в ходе исследования, наиболее точно анализируют читательскую аудиторию Mendeley [34]. Основным источником для сбора данных из соцсетей для Altmetric.com и Plum Analytics являются Twitter, Facebook и Reddit.
    Показатель цитирования важен для оценки научной деятельности сотрудника, поэтому в CRIS он вынесен отдельно, чтобы была возможность сразу получить новую информацию о цитировании. Анализ выявил, что сбор данных о цитировании результатов исследований, представленных в зарубежных CRIS, проводится на основе Scopus, Web of Science и CrossRef.
    Альтернативным источником для зарубежных информационных систем являются данные о достижении целей устойчивого развития Организации Объединённых Наций (ООН) в рамках соглашения, принятого 25 сентября 2015 г. на саммите ООН [35]. Всего выделено 17 целей (ликвидация бедности, улучшение здоровья и благополучия, защита окружающей среды, обеспечение мира и т. д.), достижение которых будет способствовать улучшению жизни человечества. Такой сбор данных осуществляется на платформе 114 (53,3%) зарубежных CRIS-систем (Experts University of Minnesota (США, https://experts.umn.edu/); Vrije Universiteit Amsterdam VU Research Expertise (Нидерланды, https://research.vu.nl/); Monash University Research Portal (Австралия, https://research.monash.edu/) и т. д.). На российских CRIS-платформах данные по целям устойчивого развития не выявлены [36, 37], хотя сбор информации по Российской Федерации проводится [38]. Соответственно показатель устойчивого развития можно считать альтернативной метрикой, количественный анализ которой позволит определить соответствие результатов исследования поставленным целям устойчивого развития. На основании всего вышеизложенного на текущий момент такой сбор данных характерен только для зарубежных CRIS.
    Кроме плагинов известных поставщиков альтметрических данных на некоторых платформах информационных систем Тайваня (NTU Scholars National Taiwan University, National Tsing Hua University Knowledge Hub), Китая (Institute of Theoretical Physics, Chinese Academy of Sciences Institutional Knowledge Base (ITP OpenIR), Knowledge Commons Southern University of Science and Technology), Дании (Arkitektur, Design og Konservering Dansk portal for forskning og KUV), Южной Кореи (Daegu Gyeongbuk Institute of Science & Technology DGIST Scholar), Эквадора (Repositorio de Investigadores del Ecuador) реализуются встроенные альтернативные показатели, однако их набор существенно ограничен. В качестве распространённых альтернативных показателей используется количество просмотров, загрузок и цитирований. На платформе NTU Scholars National Taiwan University (Тайвань) набор встроенных альтернативных метрик расширен дополнительными сведениями о загрузке (время, хронология, география – страна, область, город).
Заключение
    Таким образом, основным источником альтметрических данных для CRIS является агрегируемая Altmetric.com и Plum Analytics информация. Более того, учитывая количество зарубежных информационных систем, на платформе которых встроены соответствующие плагины и метрики, можно сказать точно, что альтметрические данные имеют большое значение, им уделяется особое место при оценке результатов научно-исследовательской деятельности.
    Практика использования зарубежными научными учреждениями сервисов, агрегирующих альтметрические данные, позволяет отметить несколько тенденций:
    
популярными сервисами для сбора альтметрических данных являются Altmetric.com и Plum Analytics;
    лишь незначительная доля зарубежных научных учреждений не используют альтметрический функционал на своих CRIS (14%);
    4% CRIS для сбора альтметрической информации используют встроенные внутренние показатели;
    популярными внутренними альтернативными показателями для отслеживания результатов научной деятельности являются просмотры, захваты и цитирование;
    альтернативной метрикой для оценки влияния является показатель устойчивого развития в соответствии с целями ООН.
