Элементы наукометрии Наука Марафон экономик = марафон знаний India China US UK А судьи кто? А.С.Грибоедов Проблема измерения количества и качества научной продукции Статистика знает всё. Есть три вида лжи: просто ложь, ложь злостная и статистика. И.Ильф, Е.Петров Б.Шоу Методы оценки уровня науки (для страны, корпорации, группы, исследователя): • Объём – количество опубликованных статей в рейтинговых журналах • Качество - количество цитирований научных статей другими авторами • Востребованность научной информации – количество прочитанных (загруженных) полнотекстовых статей Библиометрические показатели Пока единственный объективный метод внешней оценки научной продуктивности (средствами самой науки) Основные международные показатели (параметры) Число статей (в рейтинговых журналах) Число цитирований указанных статей Индекс цитирования (импакт-фактор) Индекс Хирша Число цитирующих статей (без самоцитирования) Что такое рейтинговый журнал? Можно собраться на кухне и объявить себя Советом Вселенной. Но кто, кроме вас, этому поверит? Р.Г.Стронгин Авторитетные рейтинговые списки (мультидисциплинарные перечни): Инструменты Web of Science (Science Citation Index) Institute for Science Information (ISI) Web of Knowlege SCOPUS Elsevier Список ВАК является лишь административным перечнем. Библиометрический инструментарий отсутствует Российский индекс научного цитирования (РИНЦ) Web of Science Крупнейшая и наиболее авторитетная в мире полидисциплинарная база научного цитирования. Расписывается более 14000 научных журналов. Глубина архива цитирования – 1980 г. Что следует иметь в виду В базе WoS представлено 122 российских научных журнала. Это почти все российские научные журналы, имеющие англоязычные версии. Слабо отражена российская научная периодика по гуманитарным и общественным наукам. Не учтены статьи, опубликованные до 1986 г., С Абакумовым на равных может для соавторов, которые не являются первыми в списке конкурировать только Ааронов Житейская и ISI-1985 истина Известно: что список ВАК далёк от совершенства (он постоянно меняется) что он – явление временное (ВАК говорит) Авторский запрос в WoS Автор Анализ Авторско-тематический запрос в WoS Без инициалов Ошибка ввода Refined search in WoS SCOPUS 15,000 журналов 13 миллионов патентных записей 28 миллионов рефератов 245 миллионов ссылок Глубина архива цитирования – 1996 г. Бесплатная поисковая система по научным и образовательным сайтам Scirus Авторско-тематический запрос в SCOPUS Идентичный запросу в WoS 1996 – 1969 gap for this search Против 74 в WoS Zero for the Refined Search Refined Search WoS = 15 Число научных публикаций в крупнейших странах мира за 10 лет SCOPUS 160000 140000 China UK Japan Germany France India Russia S.Korea 120000 100000 80000 60000 40000 20000 0 1996 1997 1998 1999 2000 2001 2002 2003 2004 2005 19 Заимствовано: Вадим Соболев Russia & CIS, Elsevier B.V. Число научных публикаций в России, Индии и Китае за 10 лет SCOPUS 160000 140000 120000 100000 China India Russia 80000 60000 40000 20000 0 1996 20 1997 1998 1999 2000 2001 2002 2003 2004 2005 Заимствовано: Вадим Соболев Russia & CIS, Elsevier B.V. SCOPUS USA Число публикаций China Russia Научные публикации в России, Индии и Китае (2006г.) SCOPUS 22 Заимствовано: Вадим Соболев Russia & CIS, Elsevier B.V. Author Record Count % of 8205 1 ALEKSANDROV, YA 195 2.3766 2 LEBEDEV, BV 193 2.3522 3 DODONOV, VA 137 1.6697 4 CHERNORUKOV, NG 124 1.5113 5 FUKIN, GK 119 1.4503 6 SEMCHIKOV, YD 115 1.4016 7 CHERKASOV, VK 112 1.3650 8 ALESHKIN, VY 110 1.3406 9 GINZBURG, NS 108 1.3163 10 KARYAKIN, NV 100 1.2188 11 BOCHKAREV, MN 99 1.2066 12 ABAKUMOV, GA 92 1.1213 13 SMIRNOVA, NN 91 1.1091 14 ZVONKOV, BN 88 1.0725 15 GRISHIN, DF 83 1.0116 16 MAKSIMOV, IL 82 0.9994 No Top500.unn Общее количество научных статей, опубликованных от имени ННГУ и учтённых в базе Института научной информации (США), составило 8205 Не учтены статьи, опубликованные до 1986 г., для соавторов, которые не являются первыми в списке Вузы России по данным WoS Число научных публикаций (N) за 2001-2005 гг Название организации Московский государственный университет Санкт-Петербургский государственный университет Нижегородский государственный университет Казанский государственный университет Ростовский государственный университет Саратовский государственный университет Томский государственный университет Новосибирский государственный университет ИПФ РАН Кол-во статей 14348 4642 1353 1233 1149 1102 1074 1026 858 Уральский государственный университет Воронежский государственный университет Самарский государственный университет Нижегородский государственный технический университет Мордовский государственный университет Чувашский государственный университет Нижегородская государственная медицинская академия Марийский государственный университет Нижегородский государственный архитектурно-строительный Вятский государственный университет Нижегородский государственный педагогический университет Чувашский государственный педагогический университет Марийский государственный технический университет Кировская государственная медицинская академия Нижегородская сельскохозяйственная академия Волжская государственная академия водного транспорта Мордовский государственный педагогический институт Нижегородский государственный лингвистический университет Марийский государственный педагогический институт Вятский государственный гуманитарный университет Вятская государственная сельскохозяйственная академия 832 802 442 192 142 81 58 39 31 30 26 22 20 15 12 11 9 6 6 5 1 Удельная научная активность показатель средней продуктивности научно активных сотрудников организации Может определяться за любой доступный временной интервал Удельная научная активность Число опубликованных = За определённый (или весь доступный) период от имени организации статей Число публикующихся сотрудников организации Недостаток показателя: Высокий процент научного балласта (не публикующихся сотрудников) повышает показатель Для ННГУ: Удельная научная активность Число опубликованных от имени организации статей = 8205 Число публикующихся = 4453 сотрудников организации 1980-2007 гг. = 1,84 Накопленное среднее число публикаций Измеритель научного багажа организации, отнесённого к её текущему размеру Имеет смысл за весь доступный период Число опубликованных Накопленное среднее = от имени организации статей Текущее число научных сотрудников организации Недостаток показателя: Старые (особенно сократившие число сотрудников) организации имеют высокий показатель Для ННГУ: Накопленное среднее Число опубликованных от имени организации статей Текущее число преподавателей 1980-2007 гг. = 8205 = 5,47 = 1500 Цитирование как измеритель качества средствами самой науки Science Citation Index (SCI) Химик по образованию, доктор Юджин Гарфилд является создателем этого указателя и его фирма - Institute for Scientific Information - выпускала это издание с 1964 года. С 1990 года INI принадлежит компании Thomson Reuters – правообладателю информационного ресурса ISI Web of Knowledge. Eugene Garfield, V.V. Nalimov. Chicago, 1995 Индексы цитирования Релевантность SCI определяется полнотой и качеством базы индексируемой периодики. Ресурс ISI Web of Knowledge индексирует 90% журнальных статей, опубликованных мировым научным сообществом, и включает: библиографическую базу Web of Science рейтинговую базу периодических изданий Journal Citation Reports Конкурирующими с Web of Science продуктами являются: SCOPUS фирмы Elsevier РИНЦ ООО «РУНЭБ» King’s rose King D. The scientific impact of nations. Nature. 2004. Vol. 430. P. 311-316 Top5000.ru «…людям надо есть…» Удельный индекс цитирования сотрудников организации показатель средней цитируемости научно активных сотрудников организации Может определяться за любой доступный временной интервал Удельный индекс цитирования = За определённый (или весь доступный) период Сумма индексов цитирования сотрудников Число публикующихся сотрудников организации Недостаток показателя: Высокий процент научного балласта (не публикующихся сотрудников) повышает показатель Для ННГУ: Удельный индекс цитирования Сумма индексов = 17162 цитирования сотрудников Число публикующихся = 4453 сотрудников организации 1980-2007 гг. = 3,8 Средний индекс цитирования сотрудников организации (проект) показатель средней (на одного сотрудника) цитируемости для организации Средний индекс цитирования Число цитирований статей, = опубликованных от имени организации Текущее число научных сотрудников организации Не определены временные интервалы для цитируемых и цитирующих статей Отсутствует поисковый сервис Импакт-фактор показатель научной значимости журнала За определённый год Импактфактор Число цитирований этих статей = Число опубликованных статей За предыдущие два года Классический (синхронный, Гарфилдовский) импакт-фактор Публикации в журнале J N цитирований 2008 2007 2006 Учтённые цитирования 2005 Неучтённые цитирования Пристатейные списки во всех журналах (включая сам J) 2008 2007 импакт-фактор 2008 = 2006 2005 N число статей в журнале J за 2006–2007 гг. Импакт-факторы (IF) российских научных журналов № по IF 1 Русское название Успехи физических наук 2 Английское название PHYS-USP+ IF 2003 2,595 Успехи химии USP KHIM+ 4 Письма в «Журнал экспериментальной и теоретической физики» (ЖЭТФ) JETP LETT+ 5 Биохимия BIOCHEMISTRY-MOSCOW+ 6 Журнал экспериментальной и теоретической физики J EXP THEOR PHYS+ 2,163 1,857 Polymer Science, Series C 3 IF 2005 2,392 1,836 1,326 1,099 1,170 0,858 1,156 1,099 Индекс Хирша (h-index) Предложен в 2005 г. для оценки научной продуктивности исследователей, работающих в одной предметной области An index to quantify an individual’s scientific research output J. E. Hirsch Department of Physics, University of California, San Diego Нетрадиционный взгляд оппонента опыт анализа докторской диссертации на базе информационных сервисов По данным WoS Защита диссертации - один из признанных методов оценки качества научной работы. Процедура и критерии такой оценки в России хорошо известны и достаточно эффективны. На конкретном примере успешной защиты докторской диссертации показана возможность параллельной дополнительной оценки подобной работы на базе информационных сервисов и современных наукометрических параметров. Констатируется хорошая корреляция традиционной и наукометрической оценок. Наукометрический анализ Диссертационной работы Г.Б.Малыкина Спец. Совет ИПФ РАН, февраль 2007 г. Традиционный (российский) показатель диссертанта: 67 статей из списка ВАК за период 1989-2006 гг. Число статей и цитирований 48 Sum = 215 29 Индекс цитирования 4,48 Динамика публикаций и цитирования Число цитирующих статей Ошибка ввода Кто цитирует? Индекс Хирша 29 15 14 13 12 12 11 10 9 7 …… 1 2 4 3 5 6 7 8 9 h=9