Газета Троицкий Вариант # 45

Цифры в науке и спорте

23

24

Рис. Л.Мельника

Наука — это не спорт. Но, оказывается, есть кое-какие общие проблемы. Основная — как определить, кто лучший. В беге или в футболе проблем нет: кто быстрее пробежал или кто больше забил — тот и молодец. Можно ли использовать такой подход в науке? Соблазн, безусловно, есть. Можно подсчитать число статей, или число ссылок, или еще что-то — и «раздать призы». В мире появляется тенденция максимально переходить на использование таких формальных библиометрических индикаторов для определения более сильных ученых, групп, университетов. Соответственно и финансирование часто начинает распределяться, основываясь на таких данных. Это драматически отличается от более традиционного подхода peer-review, когда все выводы основаны на мнениях компетентных экспертов. Что лучше? Пожалуй, мало кто будет спорить, что экспертиза всегда лучше, если есть компетентные, честные, беспристрастные эксперты в каждой области. Мешает только это «если». Где мешает чуть-чуть, а где-то — очень даже сильно.

Особенно, если в стране проблемы с коррупцией, а внешнюю экспертизу по каким-то причинам проводить не хотят. В такой ситуации хочется целиком перейти в «цифровой формат» — на систему начисления баллов. В нашей стране результатом такого желания стало поручение Президента двум уважаемым министрам подготовить предложения по использованию индекса цитируемости при оценке результативности работы ученых. Здесь есть рациональное зерно — в России, по всей видимости, без формальной оценки пока не обойтись. Но все ли можно свести к ней?

Вернемся к нашим спортивным аналогиям. Если наука хоть в чем-то похожа на спорт, то уж точно не на бег или другие «простые», в смысле оценки, дисциплины. К тому же даже при оценке результатов легкоатлетов нельзя пользоваться одним критерием: кто-то толкнул ядро на 20 м, кто-то прыгнул на 2 м 37 см, а кто-то пробежал стометровку за 9,87 с. Кто лучше? Можно вспомнить о десятиборье. Уже теплее — можно придумывать многокомпонентные критерии, суммирующие разные результаты. Это ближе к оценке труда ученых: можно взять много разных библиометрических показателей и учесть их совместно. Пожалуй, для некоторых наук в некоторых (но не во всех!) ситуациях это может сработать, если эксперты (все равно эксперты!) разработают хороший многомерный критерий.

Но все равно ученые — не бегуны. Они... они ... — сочетание чего-то противоречивого. Они ... Летающие лыжники! Как же начисляют очки прыгунам с трамплина? В итоговую оценку входит и формальный критерий (как далеко улетел), и несколько оценок судей, которые особым образом складываются и усредняются. Оцениваются полет, приземление и «руление» до остановки. Вот и в науке хочется иметь разумное сочетание формального критерия (ведь победителем по прыжкам не должен становиться тот, кто прыгнул красиво, но ближе всех) с оценкой экспертов. О том, какие подходы можно использовать при использовании формальных критериев в оценке результативности научной работы, в следующей статье 25 рассуждают авторы ТрВ.