МИРОВАЯ ПРАКТИКА ПРИМЕНЕНИЯ ИНДЕКСА ЦИТИРОВАНИЯ ПРИ ПРОВЕДЕНИИ И ОЦЕНКЕ НАУЧНЫХ ИССЛЕДОВАНИЙ ПАВЕЛ КАСЬЯНОВ РЕГИОНАЛЬНЫЙ ПРЕДСТАВИТЕЛЬ, НАУЧНЫЕ ИССЛЕДОВАНИЯ ФЕВРАЛЬ 2011 2 направления применения показателей научного цитирования • Практика проведения исследований – Что уже было написано по исследуемой мной проблеме? – Кто из исследователей этой проблемы наиболее авторитетен? – Где мне опубликовать мою статью? – и т.д. • Управление научной деятельностью – Чего мы добились как исследовательская организация? – В каких предметных областях мы наиболее успешны? – Какие из наших учёных наиболее активны/ авторитетны/ эффективны? – Как мы показываем себя в сравнении с нашими партнёрами или конкурентами? – Какие из международных научных связей нам следует развивать в первую очередь? – И т.д. 2 CITATION REPORT – КАЗАНСКИЙ ГОСУДАРСТВЕННЫЙ УНИВЕРСИТЕТ 3 ПОКАЗАТЕЛИ ЦИТИРОВАНИЯ КРУПНЕЙШИХ РОССИЙСКИХ ВУЗОВ Кол-во статей Суммарное Среднее цитирование цитирование Индекс Хирша 1 МГУ 97115 520530 5.36 168 2 СПбГУ 29762 147175 4.95 95 3 НИЯУ МИФИ 8040 49663 6.18 82 4 СПб Политехнический Университет 7877 31191 3.96 61 5 Казанский Федеральный Университет 7590 30984 4.08 51 6 Новосибирский Гос. Университет 4873 24090 4.94 51 7 МФТИ 2668 14559 5.46 49 8 Южный Федеральный Университет 9684 33465 3.46 47 9 Уральский Федеральный Университет 4872 17835 3.66 42 10 МИСиС 4769 12738 2.67 41 Источник: Web of Science (with Conference Proceedings) по состоянию на 13.12.2010 4 КОНЦЕПЦИЯ ИНДЕКСА ЦИТИРОВАНИЯ • Идея впервые предложена Ю. Гарфилдом – Science, 1955 • The Science Citation Index (1963) – – – – Печатный SCI (1960-е) Поиск в сети - SciSearch в 1970 На компакт-дисках 1980х Веб-интерфейс (1997) Web of Science • Расширяющийся контент: – Social Sciences Citation Index (SSCI) – Arts & Humanities Citation Index (AHCI) • Индекс цитирования – Изначально применялся для получения научной информации – Развитие электронных средств связи и хранения информации привели к возможности использовать эти данные для оценки результатов исследований Thomson Reuters • Создана 17го апреля 2008г. в результате слияния Thomson Corporation и Reuters Group PLC. • “Thomson Reuters is the world’s leading source of intelligent information for businesses and professionals” • Более 50,000 сотрудников • Представительства в 93х странах мира Более 3,500 клиентов Web of Science в 100 странах Россия Северная Америка 237 клиентов 760 клиентов в 2 странах Европа, Ближний Восток и Африка 2000+ клиентов в 50 странах Латинская Америка 244 клиента в 12 странах Азия 353 клиента в 26 странах КАК ЭТО РАБОТАЕТ? 1. По результатам научных исследований учёный публикует статью в реферируемом научном журнале. 2. Информация из 12 000 научных журналов оцифровывается в единую базу данных 3. Для каждой статьи подсчитывается количество ссылок на неё в других статьях. 8 Основные пользователи информации о цитировании в научной организации • Учёные/исследователи • Сотрудники электронных библиотек • Руководство/администрация Цикл научных исследований Что представляет собой индекс цитирования? База данных реферативной информации из более чем 12 000 авторитетнейших научных журналов, учитывающая цитирование каждой статьи. КАК РАБОТАЕТ МЕХАНИЗМ ЦИТИРОВАНИЯ 2004 2008 2003 Times Cited 2009 2000 1998 1974 Cited References 2000 Related Records 2008 1993 1999 2002 2000 WEB OF SCIENCE – ФИЛЬТРАЦИЯ ПО ИСТОЧНИКАМ ФИНАНСИРОВАНИЯ 250 Финансирование исследований Казанского университета с 2008 г. 200 150 100 50 0 13 WEB OF SCIENCE – САМЫЕ РАННИЕ СТАТЬИ УЧЁНЫХ КГУ Web of Science – панель Refine Results • По предметной области • По автору • По названию журнала • По конференции • По институту • И т.д. WEB OF SCIENCE – ПОИСК ПО КЛЮЧЕВОМУ СЛОВУ - ГРАФЕН 16 EndNote Web Journal Citation Reports • импакт-фактор – показатель, рассчитываемый эксклюзивно в JCR • Какие журналы действительно нужны библиотеке? • “в каком журнале мне опубликовать мою статью?” Категория: chemistry, mutidisciplinary АНАЛИЗ ЦИТИРУЮЩЕГО МАССИВА ДАННЫХ 19 Продвижение результатов своей деятельности • Публикация работы в индексируемом WoS журнале увеличивает потенциальную аудиторию на порядок, а иногда – не на один. • ResearcherID – глобальное сообщество исследователей – привязка статей к базе Web of Science Цикл научных исследований Web of Science для библиотекаря • Какие журналы закупать библиотеке? • Насколько часто читаются те или иные журналы? В каких журналах публикуются наши учёные? 1000 900 800 700 600 500 400 300 200 100 0 В каких журналах публикуются ссылки на них? 1200 1000 800 600 400 200 0 Journal Citation Reports Категория: Физика твёрдого тела • Какие журналы действительно нужны библиотеке? Web of Science – привязка к полным текстам статей ИСПОЛЬЗОВАНИЕ WEB OF SCIENCE НА УРОВНЕ РУКОВОДСТВА ОРГАНИЗАЦИИ • Сопоставление научных сотрудников: – Отчёт по самым публикующимся авторам (производительность) – Сопоставление их суммарной цитируемости и индексов Хирша (авторитетность или суммарный вклад в науку) – Сопоставление их среднего цитирования (эффективность их исследований) • Поиск наиболее авторитетных исследователей из других научных организаций • Анализ цитирующего массива данных: – Кто цитирует нас (какие учёные, из каких организаций, из каких стран)? 27 ИСПОЛЬЗОВАНИЕ WEB OF SCIENCE НА УРОВНЕ РУКОВОДСТВА ОРГАНИЗАЦИИ • Сопоставление по предметным областям: – Сравнение результатов в конкретной дисциплине с другими организациями России или мира; • Анализ совместных исследовательских проектов – Какие из них ведутся наиболее активно? – Какие из них являются наиболее результативными? • Сопоставление журналов – В каких из них наши учёные публиковались чаще всего? – В каких журналах целесообразнее публиковать статьи? 28 Политика отбора журналов в Web of Science • Для чего мы отбираем журналы? Относительно небольшая группа журналов публикует абсолютное большинство значимых научных результатов 120 Всего 3000 журналов покрывает 80% статей… % of database 100 80 60 40 …но, что ещё более важно – 92% того, что цитируется 20 0 0 1000 2000 3000 4000 5000 6000 # of journals Articles Citations В 7,621 журнале опубликовано 814,967 статей, получивших 20,834,641 ссылок 4% журналов (300) публикуют 30% статей (239,206) 4% журналов (300) получают 51% ссылок (10,681,596) Политика отбора журналов в Web of Science • Ежегодно рассматривается ~2000 журналов – 10-12% принимается • Эксперты Thomson Reuters – Профессионалы информационного бизнеса – Библиотекари – Эксперты в конкретной предметной области Web of Science Рассматриваемые журналы «Качество» журнала По каким критериям оцениваются журналы? • Редакционная политика – Соблюдает ли журнал сроки выхода? – Каков состав редакционной коллегии? – Как поставлен процесс реферирования статей? • Язык реферативной информации – журнал НЕ обязан быть англоязычным – необходимо наличие реферативной информации на английском языке • Цитирование – Как журнал цитируется в других изданиях? • Насколько журнал расширит наше существующее информационное наполнение? 32 Оценка исследований на уровне института Объёмы цитирования североамериканских институтов Источник: Thomson Reuters U.S. and Canadian University Science Indicators СПЕЦИАЛИЗИРОВАННОЕ РЕШЕНИЕ ДЛЯ УПРАВЛЕНИЯ НАУКОЙ - INCITES 34 Кто является самым «продуктивным» автором? 35 Кто из учёных - самый авторитетный? 36 У кого из учёных самый высокий импакт статей? 37 Как можно сравнить «физиков» с «лириками»? 38 С кем мы сотрудничаем? 39 Какие из этих совместных проектов были наиболее успешными? 40 В какой предметной области мы показываем себя лучше? Физическая химия На 41% ниже среднего Науки о вычислительной технике На 220% выше среднего 41 ИНТЕГРАЦИЯ С РЕПОЗИТАРИЕМ 42 ПОКАЗАТЕЛИ ЦИТИРОВАНИЯ НА УРОВНЕ ФАКУЛЬТЕТА 43 НОРМАЛИЗОВАННОЕ СРЕДНЕЕ ЦИТИРОВАНИЕ РОССИЙСКИХ СТАТЕЙ 44 Различные вопросы – различные показатели Объект оценки Необходимые данные Производительность Количество публикаций Объём цитирования Общее влияние Индекс Хирша Непрямое влияние Объём цитирования "второго поколения" Средний объём цитирования на статью Эффективность Соотношение процитированных/непроцитированных работ Импакт-фактор Среднее цитирование в предметной области Относительный импакт Ожидаемое цитирование в журнале Перцентили: статей, средние, относительные Показатели коллаборации Специализация Индекс Дисциплинарности Трендовый анализ Временные ряды Оцениваемая выборка Автор, группа, организация Автор, группа, организация Автор, группа, организация Автор, группа, организация Автор, группа, организация Автор, группа, организация Журнал Автор, группа, организация Автор, группа, организация Автор, группа, организация Автор, группа, организация Автор, группа, организация Автор, группа, организация Как проводится оценка результатов научной деятельности? • Комбинация различных методологий и подходов, например: – – – – – Количество и объём полученных грантов Количество наград (например, Нобелевских премий) Peer evaluation Подсчёт публикационной активности Подсчёт объёма цитирования • Peer Evaluation - Дорого, субъективно, существенные временные затраты • Ни один из этих показателей не работает идеально сам по себе, всегда есть «частные случаи» и необходима экспертная оценка для правильной интерпретации результатов В ЗАКЛЮЧЕНИЕ • Web of Science – авторитетнейший международный индекс научного цитирования • С его помощью решаются не только и не столько вопросы отчётности, сколько: – вопросы оценки результатов и прогнозирования развития института – вопросы тематического информирования научных сотрудников • Сегодня в России имеют доступ 220 институтов Академии Наук и 16 Университетов 47