Метка: списки Штерна

В октябре 2007 года в МЦНМО был дан старт инициативному проекту «Корпус экспертов» (КЭ). Эти 10 лет вместили много проб и ошибок, потерь и находок, горы технической работы и немало проведенных содержательных экспертиз. На выходе — большая актуальная база данных и опыт, которым нам хотелось бы в этом тексте поделиться с коллегами. Нет возможности описывать здесь всю эту историю с самого ее начала, но по ссылкам на страницы сайта можно восполнить пробелы…
При планировании первых опросов КЭ, в которых цитируемых специалистов из «списков Штерна» просили рекомендовать экспертов, т. е. назвать квалифицированных и уважаемых коллег той же или родственной специальности, мы надеялись на несколько витков. Думали, что те, кого назовут N раз, станут на следующем витке рекомендателями независимо от цитирования. Однако аналогии со «снежным комом» в социологических опросах не получилось: видимо, в профильных опросах круг активно работающих в той или иной области людей нередко оказывался слишком узким. А до некоторых сообществ, в которых типичное цитирование было невысоким, и поэтому рекомендателей было мало, — «ком» просто не докатывался, опросы соседних сообществ не очень помогали.

10 мая 2007 года мы впервые собрались в МЦНМО для обсуждения будущего проекта «Корпус экспертов». Впрочем, названия кажется еще не было, а тем более не было понимания, как конкретно действовать. Были «списки Штерна» на scientific.ru, благие намерения и Иван Ященко, взявшийся помочь, — это он сделал исключительно эффективно, приведя к нам в тот день Виталия Арнольда.

Проект «Корпус экспертов», по-видимому, наиболее известен научному сообществу списками «Индексы цитирования работ российских ученых» («списками Штерна»). Поддержание и обновление этих списков, несмотря на использование многочисленных автоматических инструментов для разметки загруженных из Web of Science (WoS) статей и различных механизмов обратной связи с авторами, по-прежнему составляет наиболее трудоемкую часть работы по проекту.

Проекту «Корпус экспертов по естественным наукам» вскоре исполнится восемь лет. Все эти годы «Индексы цитирования работ российских ученых» (известные также как «Списки Штерна»), размещенные с 2009 года на сайте проекта, привлекали, пожалуй, больше внимания, чем собственно формирование экспертного корпуса.

С лета 2014 года действует рабочая группа ФАНО, задача которой — создать свод правил проведения оценки результативности научно-исследовательской деятельности научных организаций, согласующихся с общими положениями, уже утвержденными документами правительства РФ… Представляется уместным уже сейчас, перед летними отпусками, рассказать об основных заложенных в нее принципах…

Ольга Реброва полагает, что «Корпус экспертов» — это кривое зеркало. Это ее право. Мы полагаем, что «Корпус экспертов» вообще не зеркало. Это инструмент более сложный, как минимум — очки. А может быть, даже и небольшой микроскоп…

Проекты «Корпус экспертов» и «Кто есть кто в российской науке» с 2010 г. функционируют совместно при поддержке фонда «Династия».