Решения thomson reuters для оценки результатов научной...
DESCRIPTION
Решения Thomson Reuters для оценки результатов научной деятельности. Павел Касьянов Апрель 20 11. 2 направления применения показателей научного цитирования. Практика проведения исследований Что уже было написано по исследуемой мной проблеме? - PowerPoint PPT PresentationTRANSCRIPT
![Page 1: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/1.jpg)
Решения Thomson Reuters для оценки результатов научной деятельности
Павел Касьянов
Апрель 2011
![Page 2: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/2.jpg)
2 направления применения показателей научного цитирования• Практика проведения исследований
– Что уже было написано по исследуемой мной проблеме?
– Кто из исследователей этой проблемы наиболее авторитетен?
– Где мне опубликовать мою статью?
– и т.д.
• Управление научной деятельностью– Чего мы добились как исследовательская организация?
– В каких предметных областях мы наиболее успешны?
– Какие из наших учёных наиболее активны/ авторитетны/ эффективны?
– Как мы показываем себя в сравнении с нашими партнёрами или конкурентами?
– Какие из международных научных связей нам следует развивать в первую очередь?
– И т.д.
2
![Page 3: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/3.jpg)
Как проводится оценка результатов научной деятельности?
• Примеры методов:– Количество и объём грантов
– Количество наград (например, Нобелевских премий)
– Количество патентов
– Peer evaluation
– Подсчёт публикационной активности
– Подсчёт количества цитирования
– Библиометрические показатели, нормализованные по предметным областям
• Peer Evaluation– Дорого, не лишено субъективности, существенные временные
затраты
![Page 4: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/4.jpg)
Некоторые организации, использующие наши данные для оценки• США: National Institutes of Health
• США: National Science Foundation (с 1974)
• Великобритяния: Office of Science & Technology; Higher Education Funding Council
• Евросоюз: DGXII (Research Directorate)
• Австралия: Академия Наук, правительственная лаборатория CSIRO
• Канада: NSERC, FRSQ (Quebec), Alberta Research Council
• Франция: Министерство Науки, OST - Париж, CNRS
• Германия: Общество Макса Планка, правительственные лаборатории, DKFZ, MDC
• Япония: Национальный институт Информатики, Министерство Образования, Министерство Экономики, Торговли и Промышленности
• Китай: Академия Наук
• Россия: РАН, СПбГУ, МИСиС
• Times Higher Education
4
![Page 5: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/5.jpg)
Политика отбора журналов в Web of Science
• Для чего мы отбираем журналы?
![Page 6: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/6.jpg)
Относительно небольшая группа журналов публикует абсолютное большинство значимых научных результатов
0
20
40
60
80
100
120
0 1000 2000 3000 4000 5000 6000
# of journals
% o
f dat
abas
e
Articles Citations
Всего 3000 журналов покрывает 80% статей…
…но, что ещё более важно – 92% того, что цитируется
В 7,621 журнале опубликовано 814,967 статей, получивших 20,834,641 ссылок4% журналов (300) публикуют 30% статей (239,206)4% журналов (300) получают 51% ссылок (10,681,596)
![Page 7: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/7.jpg)
Политика отбора журналов в Web of Science
• Ежегодно рассматривается ~2000 журналов
– 10-12% принимается
• Эксперты Thomson Reuters– Профессионалы информационного бизнеса
– Библиотекари
– Эксперты в конкретной предметной области
Web of Science
Рассматриваемые журналы
«Качество» журнала
![Page 8: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/8.jpg)
Web of Science – база в первую очередь для тематического информирования учёных. Она идеально подходит для поиска наиболее цитируемых работ по интересующей проблеме, оценки журналов и потенциальных научных связей;
Поскольку в Web of Science используется для поиска информации, работа с базой невозможна без введения поискового запроса. Который может быть достаточно комплексным;
Для научного руководства предпочтителен специальный инструмент, предоставляющий необходимые данные без существенных затрат времени и сложных поисков;
Потребность в неком эталоне для сравнения показателей учёных и организаций
Для чего мы сделали инструмент InCites?
![Page 9: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/9.jpg)
InCites – 2 части
9
• Global Comparisons – Оценка научной деятельности страны по сравнению с
остальным миром
– Сопоставление показателей в разбивке по странам и/или предметным областям
• Research Performance Profiles– Сравнение между факультетами или лабораториями внутри
института
– Анализ по статьям, автору, отделу. Анализ совместных исследовательских проектов
![Page 10: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/10.jpg)
Первая часть – Global Comparisons
10
• Global Comparisons – Оценка научной деятельности страны по сравнению с
остальным миром
– Сопоставление показателей в разбивке по странам и/или предметным областям
• Research Performance Profiles– Сравнение между факультетами или лабораториями внутри
института
– Анализ по статьям, автору, отделу. Анализ совместных исследовательских проектов
![Page 11: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/11.jpg)
Рост количества статей по наукам о вычислительной технике, экологии и поведенческим наукам в России
11
![Page 12: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/12.jpg)
Трендовый анализ показателей публикационной активности России, Индии и Бразилии
12
![Page 13: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/13.jpg)
Абсолютные и относительные показатели
• Если химики из института X получили в сумме 5000 ссылок – как обстоят дела с химией в институте?
Или
• Если статья была процитирована 20 раз – это хорошая статья?
13
![Page 14: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/14.jpg)
Нормализованные показатели цитирования
14
• Суммарный объёмцитирования по отношениюк среднему цитированиюв предметной области(Category actual/ExpectedCites, CXC) – позволяетсравнивать статьи, учёныхи организации, работающие в разных предметных областях
![Page 15: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/15.jpg)
Среднее цитирование российских статей в сравнении с остальным миром
15
Выросло в 3 раза с 1981 г.
![Page 16: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/16.jpg)
Нормализованные показатели цитирования
16
• Суммарный объёмцитирования по отношениюк среднему цитированиюв журнале (Journal actual/Expected Cites, JXC) –позволяет оценивать,насколько эффективенавтор (или группа авторов) по отношению к журналам, в которых он публикуется
![Page 17: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/17.jpg)
Нормализованные показатели цитирования
17
• Перцентили (Mean Percentile; Percentage above/below Expected level) – в какой процент самых цитируемых работ в мире (по предметной области!) входит работа или группа работ?
![Page 18: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/18.jpg)
18
![Page 19: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/19.jpg)
Вторая часть – Research Performance Profiles
19
• Global Comparisons – Оценка научной деятельности страны по сравнению с
остальным миром
– Все государства и регионы
• Research Performance Profiles– Сравнение между факультетами или лабораториями внутри
института
– Анализ по статьям, автору, отделу. Анализ совместных исследовательских проектов
![Page 20: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/20.jpg)
Каков наш вклад в науку?
20
Заранее согласованный набор данных, например, по конкретной организации
![Page 21: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/21.jpg)
Кто является самым «продуктивным» автором?
22
![Page 22: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/22.jpg)
Кто из учёных - самый авторитетный?
23
![Page 23: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/23.jpg)
У кого из учёных самый высокий импакт статей?
24
![Page 24: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/24.jpg)
Как можно сравнить «физиков» с «лириками»?
25
![Page 25: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/25.jpg)
Анализ самоцитирования
26
![Page 26: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/26.jpg)
Сравнение двух учёных
27
![Page 27: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/27.jpg)
Нормализованные показатели цитирования – разбивка по предметным областям
28
![Page 28: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/28.jpg)
Инструменты визуализации данных – физика плазмы
• Соотношение процитированных и непроцитированных работ
• Перцентили
• Цитирование по отношению к среднему в предметной области, журнале
29
![Page 29: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/29.jpg)
Анализ цитирования по ключевым словам
30
![Page 30: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/30.jpg)
С кем мы сотрудничаем?
31
![Page 31: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/31.jpg)
Какие из этих совместных проектов были наиболее успешными?
32
![Page 32: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/32.jpg)
В каких журналах публикуются наши учёные?
33
![Page 33: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/33.jpg)
Где публикуются ссылки на наших учёных?
34
![Page 34: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/34.jpg)
Кто цитирует институт наш институт в области физики?
35
Откуда такой всплеск цитирования?
![Page 35: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/35.jpg)
Обновление данных – раз в квартал
![Page 36: Решения Thomson Reuters для оценки результатов научной деятельности](https://reader036.vdocuments.site/reader036/viewer/2022062423/56814d5d550346895dba9c3d/html5/thumbnails/36.jpg)
Анализ, основанный на данных из авторитетной базы Web of Science
Возможность для руководства детально анализировать состояние науки внутри организации и отслеживать основные тренды в мировой науке
Данные ещё раз выверяются – не нужно заниматься поиском
Нормализованные показатели позволяют сравнивать учёных, работающих даже в различных предметных областях
В заключение