Выше квартилей
2.62K subscribers
101 photos
1 video
1 file
277 links
HSE: Home of Scientometrics and Expertise

Обучение и консультирование по практическим вопросам research evaluation и управлении наукой.

Все вопросы и предложения направляйте @vyshekbot или на почту Наукометрического центра ВШЭ: scientometrics@hse.ru
Download Telegram
Нобелевская неделя 2023. День 5: Премия мира

В пятый день Нобелевской недели объявляются лауреаты последней из «классических» нобелевских премий, о которых писал в своем завещании Альфред Нобель — премия Мира. Согласно завещанию, эта награда должна вручаться «тому, кто внёс наиболее существенный вклад в сплочение наций, уничтожение рабства или снижение численности существующих армий и содействие проведению мирных конгрессов». Договориться о значимости усилий в этих вопросах в связи с проявлением политических разногласий оказывается довольно затруднительно, поэтому неудивительно, что многие решения комитета вызывают живое обсуждение, а подчас и резкую критику со стороны общественности.

По официальному сообщению комитета в этом году на премию Мира номинировано 305 кандидатов, в том числе 212 индивидуальных деятелей и 93 организации. С учетом значительного числа номинантов и формата премии предсказания имен лауреатов зачастую могут объясняться симпатиями медиа.

Ежегодно, начиная с 2002 года, Институт Исследования Мира в Осло публикует собственный шортлист номинантов на премию Мира, составленный на основе исследований. В этом году список представляет Директор Института, Хенрик Урдаль. В предисловии он подчеркивает, что в 75-летнюю годовщину принятия Всеобщей декларации прав человека список возможных лауреатов закономерно включает активистов, ведущих ненасильственную борьбу в первую очередь за права человека.

Первая кандидатура — Наргис Мохаммади (Иран) и Махбуба Сирадж (Афганистан) — за неустанные попытки добиться соблюдения прав женщин в Иране и Афганистане. Вторая — Чжо Мо Тун (Мьянма) и Консультативный совет национального единства Мьянмы — за усиленную работу в интересах мира и демократии и попытки пресечь насилие со стороны вооруженных сил. Третья — Международный суд ООН — за обеспечение многостороннего сотрудничества в мирных целях. Четвертая — Виктория Таули-Корпуз (Филиппины) и Хуан Карлоc Хинтиач (Эквадор) — за ненасильственный протест в целях защиты и укрепления прав коренных народов. Пятая — Группа анализа данных по правам человека — за установление истины и поиск фактов в условиях распространения противоречивой информации.

#нобелевскаянеделя #премиямира #правачеловека
Учитывая слабую связь премии с объективными критериями, не беремся со своей стороны предложить кандидатов вне отмеченных вариантов. Кто, на ваш взгляд, станет лауреатом в этом году?

• Наргис Мохаммади и Махбуба Сирадж (права женщин) - 14
👍👍👍👍👍👍👍👍 41%
• Чжо Мо Тун и Консультативный совет национального единства Мьянмы (сопротивление военному перевороту в Мьянме) - 1
👍👍 3%
• Международный суд ООН (многостороннее сотрудничество) - 3
👍👍👍 9%
• Виктория Таули-Корпуз и Хуан Карлоc Хинтиач (права коренных народов) - 1
👍👍 3%
• Группа анализа данных по правам человека (установление фактов нарушения прав человека) - 9
👍👍👍👍👍👍 26%
• Другой деятель или организация (ваш вариант в комментариях) - 6
👍👍👍👍 18%
👥 34 человека уже проголосовало.
🏆 Наргис Мохаммади — За борьбу против угнетения женщин в Иране и за борьбу за свободу для всех
Личный бренд в карьере исследователя

Нобелевская неделя подходит к концу. В понедельник будут оглашены результаты премии по экономике, а пока мы хотели бы обратить внимание на еще одну тему, частично связанную с успехом всех лауреатов, получивших свои премии за научные исследования, и поговорить о бренде в науке.

Сегодня о «личном бренде» чаще можно услышать в контексте обсуждения сферы бизнеса, но в действительности инвестиции в личный бренд могут быть привлекательны для любого профессионала. Исследователи, занимающиеся научной работой, не исключение: для того, чтобы их работа могла оказывать социальное воздействие, ученые должны обращать внимание не только на свои исследования, но и на самих себя. 

Согласно проведенному в 2020 году иранскими авторами исследованию, основными факторами, важными для успеха личного позиционирования, являются:

- наличие личной цели на пути построения личного бренда;
- наличие четкого имиджа и перспективы личного бренда;
- наличие конкретной стратегии позиционирования личного бренда;
- учет конкурентных преимуществ личного бренда.

Для начинающих ученых позиционирование личного бренда также значительно улучшает карьерные перспективы. Ещё в 2010 году А. Клоуз приводила следующие данные: участие в консорциуме для докторантов в среднем увеличивает количество собеседований на 2,39, а участие в консорциуме, публикация в крупном журнале и защита диссертации повышают первоначальную зарплату кандидатов более чем на 5000 долларов.

В заметке Elsevier, вышедшей в 2019 году, перечислены основные стратегии, подходящие для построения личного бренда именно в сфере научных исследований. Мы коротко резюмируем их:

1. Участие в научных конференциях (как вариант — при помощи стендового доклада).
2. Простые формулировки, понятные для непрофессионалов, особенно в рамках докладов.
3. Участие в отраслевых выставках и написание обзоров на оборудование и программное обеспечение, используемое в работе.
4. Тщательный подбор журналов для публикации.
5. Написание пресс-релизов для организаций, на базе которых проводятся исследования (университеты, институты, компании).
6. Активное ведение социальных сетей.
7. Присутствие на исследовательских платформах (таких, как Mendeley и Google Scholar).

Для тех, кто заинтересован в осознанном построении личного бренда и научной карьеры, существуют курсы различного формата и направленности, вебинары и мастер-классы. Центр научной интеграции НИУ ВШЭ приглашает на один из таких курсов тех ученых, которые заинтересованы в построении личного бренда. Академический акселератор — курс, разработанный с целью развития у исследователей гибких навыков со спецификой научной среды. В программу первого модуля обучения входят блоки о карьерных траекториях, построении личного бренда и расширении коллабораций, во втором — слушатели получат важную информацию о способах привлечения финансирования, в том числе рекомендации по написанию успешных грантовых заявок. Курс начнется совсем скоро, его старт намечен на 24 октября.

#личныйбренд #научноесотрудничество #курсы
Нобелевская неделя 2023. День 6: Экономика

После окончания основной части нобелевской недели вручается премия Шведского национального банка по экономическим наукам памяти Альфреда Нобеля, известная сегодня как Нобелевская премия по экономике. Она не входит в список классических и была учреждена только в 1969 году. В связи с этим присуждение самой престижной награды в области экономики критикуется со стороны потомков Альфреда Нобеля, поскольку не соответствует его завещанию.

В 2021 году лауреатами премии стали Дэвид Кард, Джошуа Ангрист и Гвидо Имбенс — за эмпирический вклад в экономику труда и методологический вклад в анализ причинно-следственных связей, а в 2022 — Бен Бернанке, Дуглас Даймонд и Филип Дибвиг — за исследование банков и финансовых кризисов.

Экономика входит в список областей, по которым публикуется список Citation Laureates. Как мы упоминали ранее, это наиболее известные и цитируемые в своей области исследователи, которые имеют хорошие шансы получить Нобелевскую премию. В 2023 году Clarivate предлагает следующие кандидатуры: первая — За глубинный анализ и открытия в области городской экономики и города как двигателя роста (автор: Эдвард Глэзер (Edward L. Glaeser) — США). Вторая — За исследования неравенства дохода и имущественного неравенства, а также их последствий (авторы: Тома Пикетти (Thomas Piketty) — Франция, Эммануэль Саэз (Emmanuel Saez) — США, Габриэль Цукман (Gabriel Zucman) — Франция/США). Третья — За осмысление определяющих факторов экономической возможности и выявление стратегий повышения социальной мобильности (автор: Радж Четти (Raj Chetty) — США). К числу ежегодных фаворитов можно отнести также Дарона Асемоглу (Daron Acemoglu) и Джеймса Робинсона (James A. Robinson) за работы в области политэкономии.

В связи с вручением награды Факультет экономических наук ВШЭ ежегодно проводит конкурс предсказаний имени Андрея Бремзена. В 2021 году сразу двоим участникам удалось дать абсолютно точный прогноз всех трех кандидатов.
Предлагаем и вам принять участие в предсказании на площадке ФЭН и в нашем канале!

• Эдвард Глэзер (городская экономика) - 10
👍👍👍👍👍 16%
• Тома Пикетти, Эммануэль Саэз и Габриэль Цукман (имущественное неравенство) - 15
👍👍👍👍👍👍 24%
• Радж Четти (равенство возможностей и социальная мобильность) - 7
👍👍👍 11%
• Дарон Асемоглу и Джеймс Робинсон (исследования в сфере политэкономии) - 20
👍👍👍👍👍👍👍👍 32%
• Другой ученый (ваш вариант в комментариях) - 11
👍👍👍👍👍 17%
👥 63 человека уже проголосовало.
🏆Клаудиа Голдин (Claudia Goldin) - за изучение роли женщин в формировании рынка труда
Всемирный день стандартов

14 октября во всем мире отмечается Всемирный день стандартов. Дата приурочена к годовщине проведения в 1946 году в Лондоне первой конференции национальных организаций по стандартизации. В конференции приняли участие 65 делегатов из 25 стран, включая СССР. По итогам было принято решение о создании Международной организации по стандартизации.

Стандартизация является важнейшим и необходимым процессом в любой отрасли науки, техники, промышленности, здравоохранения, торговли и не только (так, в 2018 году стандарты ISO были включены в программный документ ОЭСР по измерению инноваций). Стандартизация обеспечивает безопасность, соблюдение функциональных требований и стимулирует дальнейшее научно-техническое развитие почти во всех сферах повседневной жизни.

В ряде областей современная документация по стандартам ссылается в основном на предыдущие и смежные документы, однако некоторые виды стандартов должны основываться на свежей научной экспертизе. В 2021 г. исследователи Блайнд и Фентон опубликовали статью, в которой анализировали мотивы использования ссылок на научные публикации в стандартах, а также процессы взаимодействия органов по стандартизации с отдельными учеными.

Авторы выяснили, что в совокупности всего около 25% стандартов цитируют какие-либо научные работы, однако эта пропорция заметно зависит от области науки. Чаще всего ссылки на научную литературу приводятся в стандартах, касающихся естественных наук, метрологии и экологии, а реже всего — в стандартах по материалам и дорожному строительству. Также в зависимости от области варьируется степень цитирования ученых из разных стран: американские авторы, например, вносят основной вклад в разработку стандартов нанотехнологий, в то время как британские ученые широко представлены в области химического анализа.

Любопытно, что, согласно исследованию, статьи, присутствующие в библиографических списках ISO, после публикации стандартов получают больше цитирований в течение более длительного периода времени по сравнению с контрольной группой. Поэтому, как резюмируют авторы, исследователи должны быть осведомлены о возможности повысить известность своей собственной работы посредством участия в процедурах стандартизации и использовать их в качестве дополнительного канала распространения знаний.

#всемирныйденьстандартов #wos #iso
Визуализация рейтинга Science Index и уровней «Белого списка»

На сайте РИНЦ опубликован рейтинг российских журналов Science Index (SI) за 2022 год. Обновленный рейтинг SI строится на принципах, анонсированных в марте этого года, в том числе с учетом нормировки цитирований на уровне отдельных статей и без использования каких-либо тематических рубрикаторов.

Мы решили продемонстрировать, насколько новый SI соотносится с 4-мя уровнями национального «Белого списка». Для сравнения наглядно сопоставили:

- Количество статей в журнале за год, представленное на диаграмме размером пузырьков,
- Число цитирований журнала за год по списку рейтинга SI, отображаемое по вертикали,
- Третьим показателем выступает сам рейтинговый балл Science Index — отмечен по горизонтали,
- И, наконец, четвёртый показатель — уровни «Белого списка», которые отражены цветом.

Мы визуализировали отношения между этими показателями и предлагаем вашему вниманию интерактивную пузырьковую диаграмму (bubble chart).

Отметим интересную особенность: несмотря на определенную корреляцию между SI и уровнем издания в национальном «Белом списке» (особенно в случае 4 уровня), высоко оцененные журналы по SI третьего уровня встречаются нередко. При этом многие гуманитарные журналы 1-2 уровней выступают с точки зрения SI хуже, чем журналы технического и естественно-научного профилей.

#инфографика #scienceindex #белыйсписок
СССР-РФ: эволюция национальной научной политики в наукометрическом ракурсе

17 октября в Scientometrics вышла статья наших коллег из ИСИЭЗ, в которой затрагиваются основные принципы научной политики России в советские годы и сегодня. На основе анализа динамики публикационной активности по Web of Science авторы фиксируют следующие тренды, многие из которых поднимают фундаментальные проблемы национальной научной политики:

🔷 Финансирование: в отличие от СССР и ведущих стран, в которых поддержка сектора НИОКР не снижается даже в период кризиса, в России финансирование НИОКР остается недостаточным. Несмотря на рост ВРНИОКР в абсолютном выражении, их отношение к ВВП в течение года колеблется в районе 1% и отстает от ведущих стран.

🔷 Необходимость системного подхода: работа над увеличением показателей публикационной активности должна проводиться системно путем реализации комплекса мер, связанных не только с параметрами сектора НИОКР, но и с созданием конкурентного академического рынка труда и привлекательных условий для трудоустройства ученых.

🔷 Контроль и административные методы: коллеги в исследовании критикуют административные методы регулирования и стимулирования публикационной активности, указывая на их ограниченный стимулирующий потенциал и краткосрочное воздействие, а также указывают на риски снижения качества научных результатов.

🔷 Необходимость долгосрочной перспективы: показатели эффективности мер по стимулированию исследовательской активности в стратегических документах изначально формулировались как числовые показатели с прицелом на увеличение доли России и российских исследователей в мировой науке. Такой подход изначально отличался от принципов научной политики тех стран, где наравне с количественными показателями используются также качественные индикаторы оценки и экспертная составляющая. Гонка за количеством изначально подталкивала российских исследователей к тому, чтобы генерировать больше публикаций, чем конкурирующие страны, в отдельных случаях жертвуя их качеством. Нынешняя стратегия приводит к краткосрочному повышению показателей, однако в долгосрочной перспективе для которой существенны макроэкономические условия, инвестиционный климат и качество институтов, она оказывается неэффективной.

🔷 Динамика: пример СССР и России демонстрирует, что необходимо не только добиваться формального увеличения общего числа публикаций, но еще и повышать качество национальной научной базы, «портфеля» используемых инструментов научной политики и эффективность научного процесса в целом.

Эти результаты во многом согласуются с выводами коллег в прошлые годы. Например, в статье Д. Косякова и А. Гуськова 2019 года подчеркивалось, что увеличение числа российских публикаций происходит в первую очередь за счет опережающего роста числа авторов, то есть во многом экстенсивно на фоне нереализованного ранее научного потенциала. При этом еще тогда фиксировались схожие тренды: рост производительности научных исследований российских организаций не сопровождался соответствующим увеличением финансирования и происходил на фоне снижения численности штатного персонала, занятого исследованиями и разработками.

Затронутые проблемы можно воспринимать позитивно, пожалуй, только в связи с появлением большего числа высокорейтинговых статей российских авторов (включая наших вышкинских коллег, которых мы поздравляем с выходом публикации), акцентирующих внимание на данной теме. А вот разработка путей их преодоления и слома трендов все еще остается, к сожалению, на уровне экспертной дискуссии.

#научнаяполитика
Проблемы воспроизводимости наукометрических исследований

Принцип воспроизводимости — один из основных критериев получения научного знания. Если результаты исследований невозможно воспроизвести, то зачастую это значит, что либо исследование проводится некорректно с методологической точки зрения, либо авторы изначально преследуют недобросовестные цели. В XXI веке проблема воспроизводимости обсуждается широко, во многом этой дискуссии поспособствовал выход эссе «Why Most Published Research Findings Are False» Джона Иоаннидиса в 2005 году. По результатам опроса, опубликованным в Nature в 2016 году, более 70% ученых безуспешно пробовали воспроизвести чужие эксперименты, а более 50% не смогли воспроизвести свои собственные.

Кризис воспроизводимости, прежде всего, касается медицины, биологии, психологии, а также ряда социальных наук, однако в действительности является междисциплинарным. В 2017 году на семинаре ISSI в Ухане была инициирована дискуссия о воспроизводимости результатов исследований в области наукометрии, а в 2018 на конференции в Лейдене авторы представили исследование, в котором попытались подытожить более ранние выводы, а также очертить основные проблемы, с которыми сталкивается наукометрия в связи с затронутой проблемой.

В первой части статьи говорится о непосредственной воспроизводимости (direct reproducibility), под которой понимается возможность воспроизведения результата, идентичного исходному исследованию, при условии использования тех же данных, инструментов и методов. Среди вероятных причин невоспроизводимости, помимо некорректной методологии и намеренного злоупотребления, авторы называют случайные ошибки, завышение значимости результатов и предвзятость при публикации.

Вторая часть статьи посвящена концептуальной воспроизводимости (conceptual reproducibility). Это проверка третьей стороной надежности исследования путем воспроизведения исходных утверждений с использованием альтернативных данных, методов и процедур. Основное внимание уделяется интерпретации данных и обоснованности доказательств, полученных на основе этих данных.
В своем исследовании авторы сформулировали «таксономию рисков»: набор характеристик статьи, которые следует проверить, чтобы иметь возможность предположить концептуальную воспроизводимость статьи. Все они делятся на три категории:

1. Оперативные предположения и решения:
• выбор данных,
• моделирование данных,
• аналитический подход;

2. Контроль качества:
• полнота и консистентность первичных данных,
• выбор параметров, обеспечивающий стабильность результатов;

3. Описание результатов:
описание ограничений,
• утверждения ссылаются на эмпирические результаты,
• обсуждение точности, ошибок измерений и влияния случайности.

В работе использовались несколько типов наукометрических статей в зависимости от предмета исследования: 1. Теоретические, 2. Методологические, 3. Эмпирические (глобальные), 4. Эмпирические (частные случаи), 5. Эмпирические (источники наукометрических данных).

Перечисленные типы статей могут быть в большей или меньшей степени подвержены различным рискам нарушения воспроизводимости. Так, методологические работы достаточно уязвимы перед шумом в первичных данных, а эмпирические работы вызывают вопросы с точки зрения полноты и непротиворечивости данных: у статей в выборке либо полностью отсутствовало обсуждение данных и выбора параметров, либо, если оно присутствовало, не обсуждалось влияние возможных упущений на аргументацию статьи.

В работе, представленной на конференции, достаточно хорошо описывается нынешнее положение дел в плане оценки публикаций с точки зрения воспроизводимости данных, однако вопрос об алгоритмизации оценки ожидаемой воспроизводимости в наукометрии остается открытым — вероятно, так же, как и в других областях.

#воспроизводимость #наукометрия
«Мертвые души» в соавторах

31 октября в некоторых странах в канун католического Дня всех святых широко отмечается Хэллоуин. Несмотря на неоднозначные реакции и отношение к его празднованию в России, сама дискуссия — хороший повод затронуть близкие к области death studies вопросы в контексте наукометрии. Сегодня мы рассмотрим кейс, касающийся посмертного авторства, на примере известного венгерского математика Пала Эрдёша (1913-1996).

Широкой публике он известен в первую очередь благодаря шуточному «числу Эрдёша» — рекуррентно определяемому показателю, который демонстрирует кратчайший путь соавторства от какого-либо ученого к самому Эрдёшу: например, у прямого соавтора Эрдёша показатель 1, у исследователя, пишущего в коллаборации с соавтором Эрдёша — 2, а ученые, от которых нельзя построить цепочку соавторств с Эрдёшем, имеют в качестве показателя бесконечность. По сути, можно сказать, что число Эрдёша — это число «рукопожатий» между соавторами (проверить, какое у вас число Эрдёша, вы можете в специальном сервисе).

В заметке 2011 года Вольфганг Гленцель (Wolfgang Glänzel) отмечает, что по разным причинам уже в 21 веке — в период от 3 до 10 лет после смерти П. Эрдёша — вышло 25 статей, которые указывали его как соавтора. Работу Гленцеля, в свою очередь, упоминает польский ученый Марек Космульски (Marek Kosmulski) в статье 2021 года в рамках исследования случаев фиктивного посмертного соавторства.

«Фиктивное авторство» — это форма научного мошенничества, в котором недобросовестные ученые поддельно приписываются к исследованию из корыстных соображений (например, наиболее распространенный случай: старший коллега принуждает младшего добавлять его в соавторы). В качестве случая крайнего злоупотребления соавторством Космульски приводит исследованный в статье 2020 года случай, названный «free-riding»: руководитель группы добавляет всех членов в качестве соавторов, и у последних зачастую нет права редактировать конечный вариант «их» текста.

Такая форма фиктивного соавторства, как посмертное, имеет свои особенности, т.к. усопший автор всегда более уязвим для манипуляций его именем. Для подобных случаев Космульски предлагает новое понятие — «некроавторство».

При этом Космульски подчеркивает, что не относит к фиктивному соавторству те случаи подлинного посмертного авторства, причиной которых стали:

• Технические проблемы: между отправкой и окончательной печатью прошло много времени.
• Финансовые проблемы: автор был слишком беден, чтобы покрыть расходы на печать, и не мог найти спонсоров.
• Цензура (например, государственная или издательская), и т. д., не позволившие опубликовать работу при жизни автора.

Чтобы обосновать границу легитимного указания на авторство, Космульски ссылается на критерии Международного комитета редакторов медицинских журналов (ICMJE):

• Существенный вклад в разработку концепции или дизайна работы, а также получение, анализ или интерпретация данных для работы,
• Подготовка проекта работы или ее критический пересмотр с учетом важного интеллектуального содержания,
• Окончательное утверждение версии для публикации,
• Согласие нести ответственность за все аспекты работы, чтобы вопросы, связанные с точностью или целостностью любой части работы, были надлежащим образом изучены и решены.

Если хотя бы один из критериев не выполнен, то возникает повод сомневаться в уместности указания соавторства.

По оценке автора «некроавторство» как форма научного мошенничества не является серьезной угрозой, так как почти не приносит реальной пользы. Однако он замечает, что в случае с менее известными учеными, чем П. Эрдёш, редакторы и рецензенты могут не иметь технической возможности узнать о кончине одного из авторов, что открывает пространство для манипуляций.

#обзор #журналы #некроавторство
Сравнение некрологов, индексируемых в Web of Science и OpenAlex

Продолжая затронутую в предыдущем посте тему, мы решили подробнее посмотреть на биографии и некрологи, посвященные выдающимся исследователям. Подобный жанр относительно редко встречается в научных журналах: например, в статье, посвященной анализу биографических статей в WoS, говорится, что таких публикаций меньше 2% от общего числа индексируемых текстов. В это число также входят статьи, традиционно не относящиеся к жанру биографии (стенограммы лекций, обзорные материалы и т. п.).

В ходе анализа статей в хронологической выборке с 1945 по 2014 годы (всего рассмотренно 190 350 статей) авторы пришли к выводу о наличии определенных тенденций, касающихся гендерного и предметного распределения проанализированных данных.

Так, например, установлено, что 78,0% статей написаны о мужчинах, 15,8% — о женщинах, а в 6,1% случаев (11 689 статей) пол человека, которому посвящалась публикация, не был распознан. Пол автора статьи чаще всего не был связан с полом описываемого ученого: среди авторов и мужчины, и женщины в одинаковой степени писали чаще о мужчинах. Наибольшая доля статей о женщинах относилась к области искусств и гуманитарных наук (почти 24%), социальных наук (более 18%) и междисциплинарных наук (более 17%). Самая низкая доля была в науках о жизни и биомедицине (14%), а также в области технологий и физических наук (обе области — чуть больше 12%).

Несмотря на то, что научные статьи в областях естественных и биомедицинских наук обычно цитируются чаще, чем, например, в социальных науках, наибольшее среднее число цитирований биографических статей было обнаружено именно в области социальных наук.

С 2007 года происходит уменьшение количества биографических статей. Эту тенденцию можно объяснить развитием интернета и переходу от традиционных биографических статей к персональным веб-страницам организаций.

В нашем посте мы хотели бы обратить внимание на самую распространенную подкатегорию биографических статей — некрологи, которые составляют около 61% от общего числа таких статей. При этом более 45% из них были связаны с естественными науками, а гендерное распределение в этой категории примерно такое же, как и в обычных биографических статьях: 77% некрологов посвящены мужчинам, 15% — женщинам.

В OpenAlex в отличие от Web of Science нет отдельного типа публикации «biographical item», однако «biography» присутствует в списке концептов. Мы проанализировали более 100 тысяч публикаций, относящихся к этой категории, и отобрали среди них те, в заголовке которых указаны годы жизни деятеля, которому посвящена публикация. На основании этих данных, а также данных Web of Science по предметным областям журналов, мы построили диаграмму, на которой отображается медианное количество прожитых лет, а также квартильные значения по этому показателю по каждой из 6 областей ОЭСР. Средний возраст по всем областям — 63,9 лет.

#некрологи #webofscience #openalex
​​Особенности наукометрической оценки в гуманитарных и естественных науках

В октябрьской статье Scholarly Kitchen, на фоне закрытия нескольких гуманитарных программ в Университете Западной Вирджинии, Карин Вульф в очередной раз поднимает вопрос о том, что применение моделей и требований, предъявляемых к STEM, в гуманитарных и социальных науках не только неуместно, но и нежелательно и даже опасно.

Действительно, часто приходится подчеркивать необходимость использования различных подходов, метрик и показателей при сравнении областей SSH (Social Sciences & Humanities) и STEM (Science, Technology, Engineering & Mathematics) — об особенностях оценки гуманитарных наук упоминается даже в нашем руководстве. Традиционные метрики, которые на сегодняшний день используются большинством библиометрических баз, рассчитаны преимущественно на естественные и инженерно-технические науки, тогда как в гуманитарных и социальных науках есть своя специфика: а) публикации часто представлены на родном языке, б) монографии составляют существенную долю в отдельных областях, в) в среднем число соавторов в областях SSH ниже, чем в STEM; г) темп выпуска новых публикаций в SSH также намного ниже (Waltman).

По этой причине нет универсального способа оценки публикационной активности, который был бы одинаково эффективен в отношении рассматриваемых укрупненных областей. В сегодняшнем посте мы предлагаем ознакомиться со статьей датского исследователя П. Мельхиорсена (P. Melchiorsen), посвященного особенностям библиометрии SSH и STEM.

В этой статье рассматриваются двое условных ученых, ведущих исследования в областях гуманитарных и технических наук, находящихся примерно на одной ступени научной карьеры и активности. Исследователь X публикует в основном материалы конференций в сборниках и журналах на английском языке. Среднее количество авторов публикаций — 4,2. Исследователь А пишет в основном на датском языке, но типы публикаций гораздо более разнообразны: это статьи, главы книг, книги, обзоры, комментарии и дебаты в журналах. Среднее количество авторов публикаций – 1,3. И у Х, и у А число публикаций заметно увеличивается до и в течение нескольких лет после назначения на должность профессора, а затем снова снижается.

Для анализа эффективности их работы предлагается использовать три типа индикаторов:

1. Основанные на публикациях:
1. Количество и типы публикаций;
2. Фракционный балл — для международных коллабораций и общий;
2. Основанные на цитированиях:
1. Индекс Хирша в WoS и Google Scholar;
2. Публикации в журналах из верхнего дециля по CiteScore;
3. FWCI;
3. Альтметрики:
1. Число скачиваний;
2. Число упоминаний в медиа;
3. Объем финансирования.

Все эти показатели рассчитывались для сотрудников подразделения, в которых работали рассматриваемые ученые. Полученные значения распределялись по квартилям (заметим, что в данном примере четвертый квартиль является наивысшим); для итоговой оценки использовался так называемый q-индекс, который представляет собой простую сумму квартилей по вышеприведенным показателям. Таким образом, максимально возможное значение q-индекса равно числу показателей, умноженному на 4.

На скриншоте приведены лепестковые диаграммы для рассматриваемых гипотетических исследователей. Несмотря на сильные различия в распределении преимуществ и в публикационных стратегиях, их q-индексы оказались близки друг другу: 35 у исследователя X и 37 у исследователя А.

На первый взгляд, такой подход выглядит достаточно привлекательным для ранжирования исследователей в рамках одного подразделения крупного университета или института, а также для последующего сравнения эффективности работы ученых из разных областей. Однако вопрос о том, как сравнивать ученых из различных институтов или даже стран, остается открытым. К тому же суммирование квартилей (пусть и в разрезе разных индикаторов) является скорее еще одним количественным формализованным подходом, подменяющим экспертное оценивание исследовательского вклада по модели «выше квартилей».

#SSH #STEM #обзор #руководство
Семинар НЦ НИУ ВШЭ: Открытый воспроизводимый датасет публикационных метрик России

Рады пригласить всех на очередной семинар Наукометрического центра, который пройдет онлайн во вторник 14 ноября в 16:00.

На семинаре советник проректора НИУ ВШЭ Иван Стерлигов представит свой новый научный проект:
«Открытый воспроизводимый датасет публикационных метрик России».

Выступление будет состоять из двух частей. В первой будут продемонстрированы инструменты автоматического сбора датасета, позволяющие всем желающим легально получать и актуализировать множество метрик по России и другим странам, а также любым другим сущностям в БД Scopus.

Вторая часть будет посвящена самим показателям, в первую очередь их динамике в 2022-23 гг. Рассматриваются изменения в числе публикаций России в разрезах тематик и уровней селективности изданий в сравнении с рядом других стран, смена направлений и форматов международного соавторства, перемены в обслуживающих отечественную науку издательствах, динамика по совокупности российских изданий и отдельным ключевым международным журналам. В заключение приводятся аналогичные показатели по набору 20+ ведущих российских вузов и НИИ. 

Семинар адресован в первую очередь науковедам и наукометристам, а также всем, интересующимся измерениями науки и происходящим с публикациями России и мира.

Требуется предварительная регистрация.

#анонс #вебинары
Позавчера состоялся онлайн-семинар, на котором Иван Стерлигов (ВШЭ) представил свой проект — открытый воспроизводимый датасет публикационных метрик России, а также продемонстрировал особенности работы с ним. Запись семинара и презентация доступна на нашем сайте и Youtube-канале.
Цели устойчивого развития: сравнение исследований по Web of Science и OpenAlex

С тех пор как в 2015 году ООН представила «Цели в области устойчивого развития» (ЦУР) в качестве основной повестки на период до 2030 года, классификация исследовательских работ, содействующих выполнению поставленных целей, стала еще одним широко используемым подходом при анализе научного вклада и результативности. Для того, чтобы отметить вклад исследователей в достижение этих целей, в базах Scopus и WoS были введены специальные классификаторы, указывающие на реализацию какой из 17 целей направлено конкретное исследование. Такая схема позволила ученым оценить текущие объемы исследований в разрезе не только научных областей, но и ЦУР. Однако, можно задаться вопросом, насколько репрезентативны данные классификаторы?

Так, в 2020 году вышло крупное исследование, посвященное оценке разных подходов к определению связи исследований с ЦУР. В нем авторы указывают, что любое подобное исследование должно предполагать несколько этапов подготовки: (а) предварительная интерпретация тем и концепций ЦУР, (б) определение того, что подразумевается под “вкладом” в ЦУР, (в) преобразование концепций в поисковый запрос, который позволит найти публикации, внесшие вклад, и (г) выбор базы данных.

Исследователи отобрали статьи, которые напрямую заявляют о своем вкладе в ЦУР (т.к. оценить косвенный вклад крайне сложно), и сравнили получившиеся результаты с тем, что было реализовано при помощи SciVal компанией Elsevier. В результате они обнаружили большое расхождение полученных данных. Несмотря на то, что их собственный подход выявил примерно схожее с WoS количество статей, тем не менее, найденные разными подходами статьи совпадали только в 25-50% случаев (в отношении разных целей процент совпадения варьировался). Исходя из этих результатов, авторы статьи настаивают на том, что данные WoS, посвященные ЦУР, следует оценивать критически.

При этом 13 сентября команда OpenAlex анонсировала обновление схемы базы данных: среди прочего, были добавлены поля и баллы для обозначения силы связей с целями устойчивого развития; для разметки использовалась модель машинного обучения, основанная на репозитории Aurora Universities Network. Этот репозиторий содержит размеченные поисковые запросы, касающиеся реализации ЦУР. Мы решили воспользоваться этим, чтобы расширить и дополнить анализ приведенного исследования.

С этой целью сделали собственную выборку из OpenAlex. Первоначально были отобраны более 112 тысяч статей, для которых указана тематика (concept) «sustainable development goals», а из них выделены статьи, для которых сила связей с различными целями составляет не менее 0,6. Таких статей оказалось 21 300.

Наибольшее количество статей посвящены следующим целям:

- Цель №2 «ликвидация голода» (4536),
- Цель №8 «достойная работа и экономический рост» (4078),
- Мета-цель №17 «партнерство в интересах устойчивого развития» (3642),
- Цель №9 «индустриализация, инновации и инфраструктура» (2025).

Кроме того, мы выяснили, что 52% статей находятся в открытом доступе, при этом 65% из них имеет статус Gold OA.

Следует отметить, что статьи, отобранные таким образом, все-таки составляют неполный датасет, поскольку концепции присваиваются автоматически на основании заголовка и аннотации статьи. Таким образом, если в этих полях не указывались «цели устойчивого развития» в качестве термина, статья не попадала в нашу выборку.

Результат визуализирован в приведенной диаграмме. Предлагаем читателям сравнить показатели.

#цур #wos #openalex #обзор #журналы #инфографика
День рождения «Выше квартилей» — нам два года!
Сегодня нашему каналу исполняется ровно два года 🎉

Как и в прошлом году, мы составили подборку самых просматриваемых публикаций за прошедшее время. Если вы вдруг пропустили что-то, у вас есть возможность вернуться к этим постам по ссылкам:

1️⃣ Новое в руководстве: коллекция датасетов
2️⃣ Международный день женщин в науке
3️⃣ Изменения в квартилях журналов WoS
4️⃣ HSE SciBot — бот по поиску журналов в Списках Вышки
5️⃣ Новое в руководстве: раздел про OpenAlex
6️⃣ Может ли ChatGPT усилить эффект Матфея: на примере наук об окружающей среде
7️⃣ Насколько Crossref может быть полезен как инструмент библиографического поиска в сфере искусства и гуманитарных наук
8️⃣ Метрики изданий в Google Scholar
9️⃣ Соответствие журналов Белого списка квартилям журналов в Scopus и WoS
🔟 И снова про Twitter: если вашу работу твитнули, какова вероятность, что ее процитируют?

Наибольшую популярность неизменно получали анонсы вебинаров, которые проводились на базе Наукометрического центра. Записи всех вебинаров вы можете найти на нашем сайте.

И, конечно, следите за нашим каналом, чтобы не пропустить новые мероприятия!
​​Цели устойчивого развития: внутренние и международные коллаборации

В продолжение нашего предыдущего поста о ЦУР, сегодня мы затронем тему международного партнерства и коллабораций и с этой целью обратимся к недавнему исследованию, посвященному разработке инструментов по поиску партнерств для выполнения ЦУР.
В статье указывается, что с момента оформления ЦУР большая часть усилий была направлена на выявление и оценку связей между секторами, разработку инструментов и сбор данных о взаимодействии ЦУР для политики и планирования. Но намного меньше внимания уделялось разработке методов и инструментов на основе фактических данных, которые бы ставили своей целью совершенствование подходов по внедрению коллабораций для выполнения ЦУР.
Хотя партнерства для устойчивого развития стали очень популярными и распространенными за последние два десятилетия, исследования показывают, что локальные негосударственные группы (университеты, компании, небольшие неправительственные организации, местные жители и организации на местном уровне) участвуют в реализации ЦУР недостаточно активно, так как такие партнерства являются сложными и дорогостоящими.
Используя инструменты OpenAlex, мы проанализировали распределение числа внутренних и международных коллабораций в публикациях, напрямую связанных с целями устойчивого развития. Результаты представлены на диаграмме.
Подавляющее большинство статей, напрямую касающихся устойчивого развития, — от 72% (Affordable and clean energy) до 83% (Peace, Justice and strong institutions) — пишутся в рамках внутренних коллабораций. Судя по всему международное сотрудничество наиболее характерно для целей, предполагающих активный обмен опытом и напрямую связанных с общемировым благополучием — «недорогостоящая и чистая энергия», «хорошее здоровье», «борьба с изменением климата». Внутренние коллаборации, напротив, предпочтительны в направлениях, тесно связанных с политикой конкретного государства — «мир, правосудие и эффективные институты», «качественное образование», «достойная работа и экономический рост».

#цур #openalex #обзор #инфографика
Наука без прорывов? Индекс революционности научных исследований (disruption index)

Известный исследователь Лутц Борманн в соавторстве со своим немецким коллегой совсем недавно опубликовал обзорную статью, посвященную индексу “революционности” или “прорыва” в науке (disruption index). В первой части статьи авторы подробно анализируют технические аспекты индекса и его вариантов, а в последующих — эффективность и ограничения. Поводом для обзора стали исследования в Nature, в которых обращалось внимание на снижение прорывного потенциала у новых научных работ и патентов.

Индекс прорыва используется для оценки влияния научных работ на появление подрывных инноваций — нововведений, которые обесценивают конкурентоспособные параметры благодаря уникальному преимуществу и тем самым создают новую рыночную парадигму.

При этом индекс прорыва следует отличать от индекса новизны. Последний, как отмечают авторы, основывается на представлении о том, что творчество — это не creatio ex nihilo (”творение из ничего”), а кумулятивный процесс, проявляющийся в нетипичных комбинациях предшествующего знания. С историей создания и принципом расчета индекса прорыва можно ознакомиться в работе Фанка и Оуэн-Смит, на которую ссылаются авторы.

В самой же обзорной статье приводится несколько наблюдений по теме индекса прорыва, основанных на анализе последних исследований в области:

1️⃣ В первую очередь исследователи обращают внимание на то, что прорыв и консолидация — противоположные понятия. Чем больше число статей, которые цитируют публикацию, но не ее источники, тем более прорывной ее следует считать: “Большие команды, как правило, проводят консолидирующие исследования, в то время как маленькие команды, как правило, выпускают революционные публикации” (Ву и др., 2019).

2️⃣ Свежие публикации по теме подтверждают, что всё больше исследователей пытаются интегрировать индекс прорыва в оценку влияния отдельных публикаций на научные области. Некоторые исследователи идут дальше и предлагают использовать индекс прорыва журналов (JDI) в качестве альтернативы традиционным показателям, таким как JIF (см. Цзян и Лю, 2023).

3️⃣ Снижение индекса прорыва свидетельствует не столько о том, что наука стагнирует, сколько об “инфляции цитирования”: на сдвиг в структуре сетей цитирования влияют такие факторы, как постепенное увеличение списков литературы и самоцитирование.

4️⃣ При этом на глобальном уровне наблюдается постоянное снижение средних показателей индекса прорыва во всех дисциплинах. Этот результат кажется неожиданным на фоне массового расширения глобальной научной системы в последние десятилетия.

Тенденция снижения числа прорывных исследований, как показывает обзор, подтверждается сегодня многими авторами, и это открывает пространство для новой научной дискуссии. В части обсуждения приведенной по теме литературы К. Лейбел и Л. Борманн подчеркивают, что выявленная тенденция стала заметной только благодаря введению индекса прорыва. На наш взгляд, пока неясно, как именно следует ее интерпретировать: говорит ли она о том, что наука в целом становится менее “прорывной” или, напротив, что смена парадигм становится для науки новой нормой.

По крайней мере один прорыв года, имеющий непосредственное отношение к науке, зафиксировать все же можно: словари Collins и Cambridge Dictionary связывают слова года с искусственным интеллектом (AI) на фоне популярности генеративных моделей.

#обзор #disruptionindex
Факторы развития карьеры молодых ученых

В рамках подготовки к студенческому фестивалю «Наука³», который пройдёт сегодня в Вышке, мы коснемся темы факторов, влияющих на развитие карьеры молодых ученых.

В прошлом месяце в Scientometrics вышло большое обзорное исследование, посвященное изучению различных показателей, используемых для прогнозирования будущего успеха исследователей, находящихся в начале академического пути. В работе Даниэль Ли (Danielle Lee) рассматривает публикации молодых исследователей с точки зрения: а) результата, требуемого от начинающего ученого, чтобы считаться успешным; б) детерминант, влияющих на данный результат.

В статье подчеркивается, что более половины из рассматриваемых в статье работ по теме ориентированы на рассмотрение показателей публикационной активности в качестве основного критерия эффективности: стратегия “publish or perish” продолжает доминировать в сознании многих исследователей.

Изучая критерии эффективности, автор приходит к выводу, что наиболее значимым фактором для будущего успеха является плодотворность молодого ученого в начале пути, в то время как совокупный импакт-фактор исследований почти не влияет на успешный старт карьеры в ранние годы: прогнозы развития молодых ученых, основанные на данном показателе, почти полностью совпадают с теми, при расчете которых авторы ориентируются на совокупность публикаций. Говоря о стратегии устойчивого карьерного пути, автор ссылается на исследования, которые указывают на “эффекта Матфея”: продолжительная и успешная карьера является результатом использования кумулятивных преимуществ опыта, репутации и социальных связей, а невозможность добиться прогресса на ранних этапах приводит к скорому закату научной карьеры.

Другим критически важным фактором в аспирантский период является влияние наставников и академических руководителей: их надзор в начале пути и наличие совместных работ положительно влияли на дальнейшую карьеру после получения ученой степени. Помимо прочего, наличие опытного наставника сокращало время, необходимое для получения руководящей академической должности, и повышало вероятность стать наставником самому.

При этом какие-то из факторов показали смешанные результаты: например, предоставление грантов значительно повысило продуктивность молодых биологов, однако для их коллег-медиков гранты не оказали никакого влияния.

Возвращаясь же к нашему анонсу, отметим, что на фестивале «Наука³» будет представлен и стенд Наукометрического центра. Приглашаем молодых ученых в атриум корпуса на Покровском бульваре с 15:00 до 18:00.

#обзор #анонс #молодыеученые