Читать «Общество знания: Переход к инновационному развитию России» онлайн - страница 150

Главное в том, что когда кто-то ссылается в своей статье на работу другого ученого, он действует по принципу «все или ничего». Он оценивает ту работу, ссылку на которую помещает в библиографию своей статьи, в 1 балл, а все остальные работы, которые использовал в своем исследовании, но не может процитировать, — в 0 баллов. Но ценность тех работ, которые он использовал, вовсе не отличается как 0 и 1. И выходит, что работа с ценностью, условно говоря, 0,99 балла все равно оценивается как бесполезная, получает 0 баллов.

Таким образом, частое цитирование каких-то работ, конечно, говорит о том, что это важные работы, но обратное утверждение неверно. Работы, которые не были процитированы, могут иметь высокую ценность, лишь чуть-чуть не дотягивая до 1 балла. На основании такого параметра ничего нельзя сказать о ценности таких работ — они оказываются в зоне неопределенности. А если еще есть дополнительные факторы, которые снижают цитируемость какой-то совокупности авторов, как это и было в отношении советских публикаций, то использование этого параметра в качестве показателя приводит к заведомо ложным оценкам. Причем ошибка будет исключительно грубой. Однако в годы перестройки эти пресловутые «количественные» оценки вновь вытащили наружу и сейчас делают важным индикатором в научной политике.

Наконец, третий элемент триады категорий, необходимых для разумной постановки любой цели — критерий. Он, подчиняясь цели более высокого порядка, отражает представления о добре и зле, исходя из которых ставится задача. В общем случае, можно сказать, что критерий достижения цели есть инструмент, позволяющий при выполнении программы изменений зафиксировать то состояние дел, когда реформатор может сказать «это — хорошо!» Не имея критериев оценки, в принципе невозможно рационально программировать свою целенаправленную деятельность.

Неверный критерий означает, как правило, неверную постановку цели, что обычно обнаруживается поздно и нередко с самыми печальными результатами. В большинстве типичных ситуаций ошибка в выборе критерия оказывается связанной и с ошибочным определением показателя и параметра. Культура определения критериев и их взаимосвязи с параметрами и индикаторами была подорвана во время перестройки столь грубо, что и до сих пор не видно признаков ее восстановления.

Спрашивать о показателях и критериях считалось почти неприличным. Вот, например, Н. Шмелев и В. Попов пишут в книге о советском сельском хозяйстве: «Второй по численности в мире парк тракторов используется хуже, чем где-либо: из почти 3 млн тракторов только по причине технической неисправности не эксплуатируется 250 тысяч» [200, с. 158].

Ну и что? Что здесь является показателем, каков критерий? Да, 8 % тракторов находятся в ремонте — много это или мало, хорошо это или плохо? Сколько должно находиться в ремонте в идеальном случае? Почему? Сам выбор параметра смысла не имеет. Он никак не связан с той функцией, которую выполняет трактор в системе сельского хозяйства. Почему же авторы выбирают такой странный параметр и не сообщают критерий? Потому, что если бы они взяли разумный показатель — число гектаров пашни, которую в СССР обрабатывал один трактор, то эффективность его использования пришлось бы оценить как поразительно высокую. Ибо в СССР один трактор обрабатывал площадь, в 10 раз большую, чем в Западной Европе.