ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

30
ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ ПАВЕЛ КАСЬЯНОВ РЕГИОНАЛЬНЫЙ ПРЕДСТАВИТЕЛЬ 2е ИЮЛЯ 2012 г.

description

ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ. ПАВЕЛ КАСЬЯНОВ РЕГИОНАЛЬНЫЙ ПРЕДСТАВИТЕЛЬ 2е ИЮЛЯ 2012 г. ОЦЕНКА РЕЗУЛЬТАТОВ НАУЧНОЙ ДЕЯТЕЛЬНОСТИ – 3 УРОВНЯ. - PowerPoint PPT Presentation

Transcript of ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

Page 1: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИПАВЕЛ КАСЬЯНОВРЕГИОНАЛЬНЫЙ ПРЕДСТАВИТЕЛЬ

2е ИЮЛЯ 2012 г.

Page 2: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

ОЦЕНКА РЕЗУЛЬТАТОВ НАУЧНОЙ ДЕЯТЕЛЬНОСТИ – 3 УРОВНЯ

• Web of Knowledge – в первую очередь платформа для практики проведения научных исследований, предоставляет базовые возможности для оценки, однако – наиболее распространённая система в мире

• InCites – специализированный инструмент для принятия решений о развитии науки

• Настраиваемые сервисы – подготавливаются под конкретные запросы клиента

2

Page 3: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

WEB OF KNOWLEDGE – НАИБОЛЕЕ РАСПРОСТРАНЁННЫЙ ИНСТРУМЕНТ

Азия и Австралия

353 организаций

в 26 странах

Европа, Ближний Восток и Африка

2,500+ организаций

в 50 странах

244 организаций

в 12 странах

Латинская Америка

760 организаций

в 2х странах

СевернаяАмерика

Россия 240 организаций

Казахстан 300 организаций

• более 6 000 организаций-подписчиков в мире• 20 миллионов пользователей• 150 000 пользователей ежедневно• более 12 500 журналов• более 50 миллионов записей• более 850 миллионов пристатейных ссылок

Page 4: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

ЗАКОНОДАТЕЛЬНОЕ РЕГЛАМЕНТИРОВАНИЕ ОЦЕНКИ

• Приказ Минобрнауки РФ от 14.10.2009 №406

• Приказ Минздравсоцразвития РФ от 26.08.2010 №738

• …

• Указ президента РФ «О мерах по реализации государственной политики в области образования и науки» от 7.05.2012

4

Page 5: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

УКАЗ ПРЕЗИДЕНТА ОТ 7.05.2012

• «увеличение к 2015 году доли публикаций российских исследователей в общем количестве публикаций в мировых научных журналах, индексируемых в базе данных «Сеть науки» (WEB of Science), до 2,44 процента»

• «вхождение к 2020 году не менее пяти российских университетов в первую сотню ведущих мировых университетов согласно мировому рейтингу университетов»

5

Page 6: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

2.44% - это сколько?

6

Источник: Web of Science (SCIE, SSCI, AHCI, CPCI, BkCI) по состоянию на 23.05.2012

Page 7: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

...сколько?

7Прогноз составлен исходя из предположения о том, что среднегодовой мировой поток материалов в Web of Science останется на уровне 2 млн записей

Page 8: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

ВЫСШАЯ ШКОЛА ЭКОНОМИКИ

8

• Рост годовой публикационной активности на два порядка за 6 лет

Page 9: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

НИЯУ МИФИ

9

Оформлена подписка на Web of

Science

Оформлена подписка на Web of

Science

Page 10: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

СИБИРСКИЙ ФЕДЕРАЛЬНЫЙ УНИВЕРСИТЕТ

10

Оформлена подписка на Web of

Science

Оформлена подписка на Web of

Science

Page 11: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

“THE KNOWLEDGE EFFECT”

• Разумеется, сам по себе факт подписки на Web of Science вряд ли обеспечивает удвоение количества статей

• Тем не менее:– Эффективное тематическое информирование учёных

– Более активное участие в коллаборациях

– Понимание, где стоит публиковаться, а где – нет

– Возможность оформления пристатейной библиографии именно в том виде, в котором её принимает издательство...

• ...а также грамотные решения о развитии науки в университете вполне могут придать необходимый импульс

11

Page 12: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

КАК ПРИНИМАТЬ ГРАМОТНЫЕ РЕШЕНИЯ О РАЗВИТИИ НАУКИ?

• Необходимо чёткое понимание текущей ситуации– в каких научных направлениях наша организация

хорошо себя проявляет?

– Что происходит с наукой в мире? Какие направления имеет смысл поддерживать, какие – нет?

– Кто из учёных работает действительно эффективно? Кого из молодых учёных нам ни в коем случае нельзя терять?

– Как обстоят дела с коллаборациями?

– Где мы публикуемся и где нам надо публиковаться?

12

Page 13: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

Как строится база данных Web of Science?

• Метаданные по журнальным статьям:– Фамилию и инициалы автора

– Название организации

– Название фонда, финансирующего исследования

– и т.д.

• Всё это мы получаем напрямую от издателей.• Разные издатели по-разному могут перевести

название одной и той же организации, по-разному могут транслитерировать одну и ту же фамилию.

13

Page 14: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

14

Варианты написания МГУ в Web of ScienceInstitutions Record Count

MOSCOW MV LOMONOSOV STATE UNIV 57257

MV LOMONOSOV STATE UNIV 41482

MV LOMONOSOV MOSCOW STATE UNIV 350

MSU 274

LOMONOSOV MOSCOW STATE UNIV 175

LOMONOSOV STATE UNIV 161

MV LOMONOSOV UNIV 123

LOMONOSOV UNIV 47

MGU 44

M V LOMONOSOV MOSCOW STATE UNIV 42

M V LOMONOSOV STATE UNIV 30

MOSCOW LOMONOSOV STATE UNIV 22

MOSCOW MV LOMONOSOV UNIV 12

MOSCOW STATE LOMONOSOV UNIV 10

LOMONOSOV MSU 9

MOSCOW LOMONOSOV UNIV 9

MSU MV LOMONOSOV 7

MV LOMONOSOV MSU 7

M LOMONOSOV STATE UNIV 6

MV LOMONOSOV STATE UNIV MOSCOW 6

M LOMONOSOV MOSCOW STATE UNIV 4

IM LOMONOSOV MOSCOW STATE UNIV 3

MU LOMONOSOV STATE UNIV 3

LOMONOSOV MOSCOW STATE UNIV SKOBELTSYN INST NUCL 2

LOMONOSOV STATE UNIV MOSCOW 2

LOMONOSOV UNIV MOSCOW 2

ML LOMONOSOV STATE UNIV 2

MN LOMONOSOV MOSCOW STATE UNIV 2

RUSSIA LOMONOSOV STATE UNIV 2

STAATLICHEN LOMONOSOV UNIV MOSKAU 2

VM LOMONOSOV STATE UNIV 2

Page 15: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

НАУКОМЕТРИЧЕСКИЙ ИНСТРУМЕНТ INCITES

• Доступа у МГУ пока нет

• Как организуется доступ:

• Данные из Web of Science выгружаются по определённому поисковому запросу, например, по МГУ.

• Записи по сотрудникам и организациям выверяются совместно с заказчиком

• Выгруженный набор данных пропускается через аналитическую программу, и результаты предоставляются в табличном и графическом виде

Page 16: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

Нормализованные показатели цитирования

16

• Суммарный объёмцитирования по отношениюк среднему цитированиюв предметной области(Category actual/ExpectedCites, CXC) – позволяетсравнивать статьи, учёныхи организации, работающие в разных предметных областях

Page 17: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

Нормализованные показатели цитирования

17

• Суммарный объёмцитирования по отношениюк среднему цитированиюв журнале (Journal actual/Expected Cites, JXC) –позволяет оценивать,насколько эффективенавтор (или группа авторов) по отношению к журналам, в которых он публикуется

Page 18: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

В КАКИХ НАПРАВЛЕНИЯХ НАША ОРГАНИЗАЦИЯ ХОРОШО СЕБЯ ПРОЯВЛЯЕТ?

Предметная область А

18

Предметная область Б

Page 19: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

РАБОТЫ КАКОГО АВТОРА ЦИТИРУЮТСЯ ЛУЧШЕ ВСЕГО С УЧЁТОМ ПРЕДМЕТНОЙ ОБЛАСТИ?

19

Источник: Thomson Reuters InCites

Физик

Медик

Page 20: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

С кем мы сотрудничаем?

20

Page 21: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

Какие из этих совместных проектов были наиболее успешными?

21

Page 22: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

Некоторые дисциплины российской физики – рост публикационной активности

22

Page 23: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

КАКИЕ ТЕМЫ НАИБОЛЕЕ АКТУАЛЬНЫ В СЕГОДНЯШНИХ ИССЛЕДОВАНИЯХ?

23 Источник: Essential Science Indicators

Page 24: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

ПОЛИТИКА ОТБОРА ЖУРНАЛОВ

• Зачем она нужна и почему мы не индексируем все научные журналы мира?

24

Page 25: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

25

ПРОЦЕСС ОТБОРА ЖУРНАЛОВ: 4 ОСНОВНЫХ КРИТЕРИЯ

Соблюдение издательских

стандартов

Анализ содержимогожу

рналаМеждународная диверсификация

Анализ цитирования

•Своевременность выхода

•Международные издательские конвенции

•Библиографическая информация на английском языке

•Наличие процесса рецензирования

•Обогатит ли этот журнал базу Web of Science новым контентом?

•Или эти вопросы уже достаточно хорошо освещены в базе?

•Как журнал соотносится с другими журналами той же направленности?

• Насколько диверсифициро-вана международно редколлегия журнала?

•Направлен ли журнал на международную или локальную аудиторию?

Новые журналы:

• Цитирование предыдущих работ авторов и редакторов.

Существующие журналы:

•Импакт-фактор

Анализ цитирования проводится в контексте предметной области журнала

Page 26: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

ЧТО ДАЁТ ЖЁСТКАЯ ПОЛИТИКА ОТБОРА ЖУРНАЛОВ?

• Однородность массива данных– Если у статьи одно цитирование из журнала Nature и

одно – из журнала X, мы обеспечиваем достаточную однородность данных, чтобы эти цитирования можно было складывать

• И как следствие – достоверность показателей публикационной активности и цитирования– Абсолютное большинство задач по оценке

результатов научной деятельности в мире решается именно на основе данных Web of Science.

26

Page 27: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

ИМПАКТ-ФАКТОР КАК ИНСТРУМЕНТ ОЦЕНКИ ИССЛЕДОВАНИЙ

• Замечательно, что руководство делает первые шаги в направлении оценки результатов научной деятельности.

• Тем не менее, импакт-фактор является показателем эффективности работы журнала, а не какой-либо определённой научной работы или автора, опубликовавшегося в журнале.

• Разброс цитирований конкретной статьи при известном импакт-факторе огромен: от 0 до ...

27

Page 28: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

ТЕНДЕНЦИИ В НАУЧНЫХ ИССЛЕДОВАНИЯХ

• Конкуренция за государственное финансирование исследований растёт, но доступные бюджеты уменьшаются

• Конкуренция за ключевые позиции в университетах также растёт

• Необходимость контроля:• Затрат на исследования • Рентабельности инвестиций (ROI)

• Необходимость доказательства качества проводимых в университете исследований:

• Для привлечения новых студентов• Для привлечения новых научных сотрудников• Для привлечения новых инвестиций

РЕЗУЛЬТАТ: Организации нуждаются в объективных данных длля оценки науки, для принятия решений о дальнейшем развитии

28

Page 29: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters

НАШЕ ДОЛГОСРОЧНОЕ ВИДЕНИЕ РЕШЕНИЙ ДЛЛЯ ОЦЕНКИ ИССЛЕДОВАНИЙ

29

Page 30: ПРИМЕНЕНИЕ ПОКАЗАТЕЛЕЙ ЦИТИРОВАНИЯ ПРИ ОЦЕНКЕ НАУКИ

©20

09 T

hom

son

Reu

ters [email protected]