Можно ли быть признанным, но нецитируемым?
«Можно ли быть признанным, но нецитируемым? Сравнение опросных и наукометрических оценок репутаций в социальных науках» — с таким докладом выступил вчера Михаил Соколов (научный руководитель Центра институционального анализа науки и образования ЕУСПб) на 192-м заседании Московского семинара по науковедению и наукометрии.
Цитирование — это не всегда голос за качество работы, это может быть возвращение интеллектуального долга, политический акт и т.п. Поэтому оценивание научного вклада только на основе метрик не всегда точно. Всегда есть вероятность признать несуществующие заслуги ученого и не признать реальные.
Автор выделил 3 основные проблемы при использовании метрик:
1. Проблема валидности: неясно, как соотносятся полученные и ожидаемые цитирования, и их признание/влияние. В разных дисциплинах цитируют по-разному .
2. Проблема покрытия: языковые зоны (неанглоязычная наука лишь частично попадает в зону видимости основных цитатных баз) и разнообразие жанров (статьи в журналах цитируются лучше, чем диссертации, тезисы конференции и другие жанры).
3. Проблема реактивности (цитирование превращается в валюту) и отрицательного набора (чем менее этично ведут себя ученые при цитировании, тем лучше они цитируются).
ЦИАНО провел исследование, базируясь на репутационных опросах о том, кто внес самый значимый вклад в науку/отрасль. На основе данных опроса и наукометрии можно сделать выводы о реальном положении дел в науке. В выборку для опроса попали те, кто за последние 5 лет опубликовали минимум 3 статьи в РИНЦ (социологи, экономисты, политологи) и были зарегистрированы в Elibrary. Около 25% исследователей из выборки поучаствовали в опросе. Основные вопросы, которые задавали респондентам были следующие: кто сделал важный вклад в свою область исследования и в науку в целом, кого добавить в экспертное жюри по специальности? Полученные результаты складывали в общий репутационный рейтинг и сравнили с общими показателями метрик: elibrary, ядро РИНЦ и RSCI. В качестве иллюстрации приводим таблицу соотношения данных из опроса с данными из elibrary, ядра РИНЦ и RSCI (например, 6 человек, которые вошли в ТОП-20 elibrary, вошли в ТОП-20 в рамках обобщенного репутационного рейтинга).
При сопоставлении результатов рейтингов цитируемости и опроса наименьшие расхождения выявлены при сравнении ведущих ученых по цитированиям в журналах RSCI, тогда как на вершине рейтинга по цитируемости в ядре РИНЦ в целом немало исследователей, редко упоминаемых экспертами. Авторы при этом отмечают, что на ошибки в сопоставлении результатов рейтингов и опросов влияли: дисциплинарные границы, ошибочная атрибуция, соавторство и коллективные монографии, национальность, жанры публикации и цитатные базы, манипуляции, границы между наукой и практикой.
О подобных результатах в социологии можно почитать в исследовании «Академические репутации в российской социологии».
#обзор #доклад #цитирование #россия
«Можно ли быть признанным, но нецитируемым? Сравнение опросных и наукометрических оценок репутаций в социальных науках» — с таким докладом выступил вчера Михаил Соколов (научный руководитель Центра институционального анализа науки и образования ЕУСПб) на 192-м заседании Московского семинара по науковедению и наукометрии.
Цитирование — это не всегда голос за качество работы, это может быть возвращение интеллектуального долга, политический акт и т.п. Поэтому оценивание научного вклада только на основе метрик не всегда точно. Всегда есть вероятность признать несуществующие заслуги ученого и не признать реальные.
Автор выделил 3 основные проблемы при использовании метрик:
1. Проблема валидности: неясно, как соотносятся полученные и ожидаемые цитирования, и их признание/влияние. В разных дисциплинах цитируют по-разному .
2. Проблема покрытия: языковые зоны (неанглоязычная наука лишь частично попадает в зону видимости основных цитатных баз) и разнообразие жанров (статьи в журналах цитируются лучше, чем диссертации, тезисы конференции и другие жанры).
3. Проблема реактивности (цитирование превращается в валюту) и отрицательного набора (чем менее этично ведут себя ученые при цитировании, тем лучше они цитируются).
ЦИАНО провел исследование, базируясь на репутационных опросах о том, кто внес самый значимый вклад в науку/отрасль. На основе данных опроса и наукометрии можно сделать выводы о реальном положении дел в науке. В выборку для опроса попали те, кто за последние 5 лет опубликовали минимум 3 статьи в РИНЦ (социологи, экономисты, политологи) и были зарегистрированы в Elibrary. Около 25% исследователей из выборки поучаствовали в опросе. Основные вопросы, которые задавали респондентам были следующие: кто сделал важный вклад в свою область исследования и в науку в целом, кого добавить в экспертное жюри по специальности? Полученные результаты складывали в общий репутационный рейтинг и сравнили с общими показателями метрик: elibrary, ядро РИНЦ и RSCI. В качестве иллюстрации приводим таблицу соотношения данных из опроса с данными из elibrary, ядра РИНЦ и RSCI (например, 6 человек, которые вошли в ТОП-20 elibrary, вошли в ТОП-20 в рамках обобщенного репутационного рейтинга).
При сопоставлении результатов рейтингов цитируемости и опроса наименьшие расхождения выявлены при сравнении ведущих ученых по цитированиям в журналах RSCI, тогда как на вершине рейтинга по цитируемости в ядре РИНЦ в целом немало исследователей, редко упоминаемых экспертами. Авторы при этом отмечают, что на ошибки в сопоставлении результатов рейтингов и опросов влияли: дисциплинарные границы, ошибочная атрибуция, соавторство и коллективные монографии, национальность, жанры публикации и цитатные базы, манипуляции, границы между наукой и практикой.
О подобных результатах в социологии можно почитать в исследовании «Академические репутации в российской социологии».
#обзор #доклад #цитирование #россия
Соавторство в современных исследованиях
Журнальные статьи с большим количеством авторов, как правило, чаще цитируются. Тем не менее, степень, в которой соавторство является преимуществом, варьируется в зависимости от областей исследования и стран.
Авторами было проанализировано 88 миллионов статей с 1900 по 2020 год. Международное соавторство в WoS увеличилось с 10% до 25% (1990-2011). При этом в области искусства и гуманитарных наук преобладали индивидуальные исследования, а в 2000 году соло-статьи составляли около половины всех статей по общественным наукам, тогда как групповые публикации были нормой в областях STEM. Подробнее про методы анализа и ход исследования читайте в самой статье.
Соавторство возникает по крайней мере по двум причинам: между аспирантами и научными руководителями или для того, чтобы закрыть потребность в крупномасштабных исследованиях. Существует множество способов участия в исследовательских проектах, но не все из них можно считать за соавторство. Например, незначительный вклад в проект может не рассматриваться как совместная работа; в то время как авторство можно получить в дар; руководители групп могут быть указаны в качестве последних авторов без конкретного вклада в исследование и т.д.
CRediT (Contributor Roles Taxonomy) перечисляет 14 авторских ролей: концептуализация; сбор данных; формальный анализ; получение финансирования; исследование; методология; администрирование проекта; поиск и подготовка материалов для исследования; программное обеспечение; руководство проектом; проверка результатов; визуализация; написание текста — первоначальный вариант; написание текста — рецензирование и редактирование. Из этого списка можно сделать вывод, что любой из этих видов вклада, если он достаточно существенен, может квалифицировать человека как соавтора. Однако в других руководствах содержатся более строгие требования.
К 2020 году в большинстве широких предметных областей Scopus в среднем было не менее четырех авторов на статью (включая все междисциплинарные и широкие области естественных наук, энергетики и химической инженерии, а также все науки о жизни и здоровье). В гуманитарных науках приходилось менее 3,5 авторов на статью. За весь период исследования (1900-2020) показатель соавторства увеличился во всех 332 узких областях Scopus. В гуманитарных и социальных науках индивидуальное авторство по-прежнему является нормой (среднее количество авторов во многих случаях ниже 1,4).
Соавторство является неотъемлемой частью современной науки, поэтому руководителям и менеджерам можно посоветовать привлекать финансирование на развитие исследовательских групп, стимулировать общение между потенциальными авторами и формировать более крупные исследовательские группы.
#обзор #scopus #цитирование #соавторство
Журнальные статьи с большим количеством авторов, как правило, чаще цитируются. Тем не менее, степень, в которой соавторство является преимуществом, варьируется в зависимости от областей исследования и стран.
Авторами было проанализировано 88 миллионов статей с 1900 по 2020 год. Международное соавторство в WoS увеличилось с 10% до 25% (1990-2011). При этом в области искусства и гуманитарных наук преобладали индивидуальные исследования, а в 2000 году соло-статьи составляли около половины всех статей по общественным наукам, тогда как групповые публикации были нормой в областях STEM. Подробнее про методы анализа и ход исследования читайте в самой статье.
Соавторство возникает по крайней мере по двум причинам: между аспирантами и научными руководителями или для того, чтобы закрыть потребность в крупномасштабных исследованиях. Существует множество способов участия в исследовательских проектах, но не все из них можно считать за соавторство. Например, незначительный вклад в проект может не рассматриваться как совместная работа; в то время как авторство можно получить в дар; руководители групп могут быть указаны в качестве последних авторов без конкретного вклада в исследование и т.д.
CRediT (Contributor Roles Taxonomy) перечисляет 14 авторских ролей: концептуализация; сбор данных; формальный анализ; получение финансирования; исследование; методология; администрирование проекта; поиск и подготовка материалов для исследования; программное обеспечение; руководство проектом; проверка результатов; визуализация; написание текста — первоначальный вариант; написание текста — рецензирование и редактирование. Из этого списка можно сделать вывод, что любой из этих видов вклада, если он достаточно существенен, может квалифицировать человека как соавтора. Однако в других руководствах содержатся более строгие требования.
К 2020 году в большинстве широких предметных областей Scopus в среднем было не менее четырех авторов на статью (включая все междисциплинарные и широкие области естественных наук, энергетики и химической инженерии, а также все науки о жизни и здоровье). В гуманитарных науках приходилось менее 3,5 авторов на статью. За весь период исследования (1900-2020) показатель соавторства увеличился во всех 332 узких областях Scopus. В гуманитарных и социальных науках индивидуальное авторство по-прежнему является нормой (среднее количество авторов во многих случаях ниже 1,4).
Соавторство является неотъемлемой частью современной науки, поэтому руководителям и менеджерам можно посоветовать привлекать финансирование на развитие исследовательских групп, стимулировать общение между потенциальными авторами и формировать более крупные исследовательские группы.
#обзор #scopus #цитирование #соавторство
Научное влияние или личная выгода: зачем цитируют?
Недавно вышла статья «Как статус исследовательских работ влияет на то, как их читают и цитируют», основанная на опросе ряда авторов, для того чтобы оценить, насколько содержательно повлияли на их исследования ссылки и цитирования из других работ. Данные были собраны в 2018 году с помощью персонализированного опроса Qualtrics среди случайно выбранных авторов статей, опубликованных в 2015 году в WOS. Были получены заполненные анкеты от 9380 респондентов, предоставивших данные по 17 154 ссылкам в 15 предметных областях. Про методы анализа данных подробнее в самой статье.
Основные выводы статьи:
• Более половины ссылок на научные статьи отражают незначительное или полное отсутствие научного влияния на цитирующих их авторов.
• Цитирование уже высоко цитируемых работ в 2-3 раза чаще отражает существенное научное влияние.
• Цитирование изменяет восприятие качества: при низком количестве цитирований статьи кажутся менее качественными. Такие статьи читаются более поверхностно и обнаруживаются на более поздних этапах работы над статьей.
Некоторые исследователи ищут статьи для поддержки какого-то конкретного аргумента в своей собственной работе, другие —те, из которых можно почерпнуть идеи, которые повлияют на их текущую или будущую работу. Авторы утверждают, что первых цитирований и ссылок сравнительно больше. Например, иногда ссылка на признанного эксперта в определенной области используется для легитимации вклада самого цитирующего.
Действительно, ссылки имеют ряд функций, а их авторы — массу мотивов, и смешивать их в одном показателе может казаться грубым упрощением. О том, какую можно выделить типологию цитирований с точки зрения содержательных мотивов, мы написали в нашем руководстве.
#обзор #цитирование #руководство
Недавно вышла статья «Как статус исследовательских работ влияет на то, как их читают и цитируют», основанная на опросе ряда авторов, для того чтобы оценить, насколько содержательно повлияли на их исследования ссылки и цитирования из других работ. Данные были собраны в 2018 году с помощью персонализированного опроса Qualtrics среди случайно выбранных авторов статей, опубликованных в 2015 году в WOS. Были получены заполненные анкеты от 9380 респондентов, предоставивших данные по 17 154 ссылкам в 15 предметных областях. Про методы анализа данных подробнее в самой статье.
Основные выводы статьи:
• Более половины ссылок на научные статьи отражают незначительное или полное отсутствие научного влияния на цитирующих их авторов.
• Цитирование уже высоко цитируемых работ в 2-3 раза чаще отражает существенное научное влияние.
• Цитирование изменяет восприятие качества: при низком количестве цитирований статьи кажутся менее качественными. Такие статьи читаются более поверхностно и обнаруживаются на более поздних этапах работы над статьей.
Некоторые исследователи ищут статьи для поддержки какого-то конкретного аргумента в своей собственной работе, другие —те, из которых можно почерпнуть идеи, которые повлияют на их текущую или будущую работу. Авторы утверждают, что первых цитирований и ссылок сравнительно больше. Например, иногда ссылка на признанного эксперта в определенной области используется для легитимации вклада самого цитирующего.
Действительно, ссылки имеют ряд функций, а их авторы — массу мотивов, и смешивать их в одном показателе может казаться грубым упрощением. О том, какую можно выделить типологию цитирований с точки зрения содержательных мотивов, мы написали в нашем руководстве.
#обзор #цитирование #руководство