Оценка значимости (влиятельности) ученых и журналов
Распространенная оценка продуктивности научной деятельности основывается на абсолютных показателях общего числа опубликованных научных работ и/или библиографических ссылок на них. Однако такая оценка, как правило, носит односторонний характер. Общее число статей в действительности оценивает лишь публикационную активность научного работника, но не учитывает значимости публикаций, того информационного вклада, который они вносят в науку. Общее число ссылок на работы автора не учитывает возможности большого числа ссылок только на некоторые из его работ, написанные притом в соавторстве. Этот показатель дает неоправданный приоритет цитирующим обзорным работам перед исследовательскими. В этих случаях показатель также не оценивает реального вклада ученого в науку.
Чтобы устранить указанные ограничения, можно считать только число значимых статей, установив для их значимости критерий определенного числа ссылок на них. Но такой критерий произволен и субъективен, поскольку он должен быть разным в разных науках и для разных возрастных категорий ученых. Можно было бы ограничиться подсчетом числа только наиболее цитируемых статей, но и этот абсолютный критерий обладает недостатками предыдущего. Кто и как будет устанавливать порог наибольшей цитируемости?
Индексы цитирования могут относительно адекватно отражать результативность научной деятельности, если они опираются на объективную выборку журналов. Хотя самые известные из них Science Citation Index фирмы Thomson Reuters и Scopus фирмы Elsevier претендуют на статус международных, первый из них отражает мнение и практику американских, а второй - европейских ученых.
Для оценки и сравнения результативности научной деятельности российских ученых необходимо дождаться полной готовности Национального российского индекса цитирования (РИНЦ), который разрабатывается с 2005 г. Научной электронной библиотекой (НЭБ). Основные задачи, которые решает этот проект, - создание информационно-поисковой системы по публикациям российских ученых, единого их реестра, инструментария для статистического анализа отечественной науки, эффективной системы навигации в массиве научной информации.
Названный проект является не единственной отечественной инициативой по созданию указателя библиографических ссылок. Другим подобным проектом является Указатель Российского фонда фундаментальных исследований (РФФИ). Начиная с 1992 г. РФФИ является основной организацией, финансирующей фундаментальные научные исследования на конкурентной основе. Источником данных для Указателя РФФИ является база данных, в которой содержится информация о поданных конкурсных заявках на исследовательские проекты и результатах их выполнения. В отличие от РИНЦ, в этом указателе учитываются и иноязычные публикации (около 40% от общего числа). Почти половину вводимых публикаций составляют журнальные статьи. Общее число отечественных и зарубежных журналов, в которых публикуются эти статьи, превышает 5 тыс. наименований, из которых 40% представлены в Journal Citation Report (JCR) фирмы Thomson- Reuters.
По данным, которые подсчитывают названные учреждения, вычисляют и показатели значимости (влиятельности) и быстроты отклика (оперативности) научных журналов, получивших названия Impact factor и Immediacy index. Влиятельность конкретного журнала в определенном году вычисляется как отношение числа ссылок этого года в других журналах на статьи нашего журнала, опубликованные за два предыдущих года, а оперативность - на статьи, опубликованные в том же году. По этим показателям корректируется комплектование периодики научных библиотек и ПРНД ученых, публикующих статьи в журналах.
Введенные в JCR показатели "Impact factor" и "Immediacy index" являются тонкими количественными оценками научного статуса журнала, отражающими, по сути, качество работ, публикуемых в журнале, через оценку двух аспектов журнала - продуктивности (числа опубликованных в нем работ) и цитируемости (количества ссылок на него, т.е. его используемости учеными).
Impact factor можно рассматривать как показатель влиятельности журнала (обозначим его  ), который рассчитывается как отношение числа ссылок, которые получил журнал в текущем году на статьи, опубликованные в этом журнале в предшествующие два года, к числу статей, опубликованных в этом журнале в эти же два предшествующих года.
Immediacy index можно рассматривать как показатель быстроты отклика на журнал. Этот показатель равен отношению числа ссылок, полученных журналом на статьи текущего года, к числу статей, опубликованных в нем в том же году.
Любые количественные показатели при оценке научной деятельности могут служить лишь формальными данными для содержательной интерпретации, поскольку они не учитывают индивидуальных особенностей мыслительной работы ученого и национальных традиций сложившейся системы информационной коммуникации. Вместе с тем, эти данные позволяют корректировать субъективную оценку значимости отдельных ученых, научных коллективов и даже сравнивать интеллектуальную деятельность разных стран.
Закон рассеяния статей конкретной тематики по журналам
Еще одним важным свойством научных публикаций является их рассеяние. Закон рассеяния научных статей в журналах был открыт в 1934 г. С. Бредфордом, который в 1948 г. дал ему следующую формулировку [8]:
"Если научные журналы расположить в порядке убывания числа помещенных в них статей по какому-либо заданному предмету, то в полученном списке можно выделить ядро журналов, посвященных непосредственно этому предмету, и несколько групп или зон, каждая из которых содержит столько же статей, что и ядро. Тогда числа журналов в ядре и в последующих зонах будут относиться как  ".
В соответствии с этим законом журналы по продуктивности можно сгруппировать так, чтобы они как бы образовали три зоны. Включенные в каждую такую зону журналы содержали бы одну треть публикаций по данному предмету, помещенных во всех этих журналах.
Первая, ядерная зона содержит публикации из небольшого числа самых продуктивных журналов -  . Вторая зона содержит публикации из большего числа журналов средней продуктивности -  , а третья зона - из еще большего числа журналов с низкой продуктивностью,  . Тогда в соответствии с рассматриваемым законом
где  является коэффициентом рассеяния, т. е. величиной для данного предмета и времени постоянной.
Другими словами, если совокупность всех публикаций по какому-либо вопросу принять за целое, то в специальных журналах данного профиля (число которых невелико) помещается лишь одна треть этих публикаций. Вторая треть статей по данному вопросу оказывается опубликованной в значительно большем числе тематически родственных (смежных) журналов. Последняя треть этих публикаций рассеяна в огромном числе периодических изданий, в которых появление статей данной тематики трудно предвидеть, так как эти издания имеют широкий профиль или общенаучный характер.
За годы, прошедшие со времени открытия этого закона, проведены сотни исследований с целью проверки его истинности и поиска для него строгого математического выражения. Они показали, что закон этот выполняется только при определенных условиях, когда предмет или тема четко сформулированы, учитываются все релевантные документы в пол-ном перечне изданий и строго ограничено время выхода этих изданий.
Последнее условие имеет особый смысл, так как закон этот характеризует рассеяние в определенный момент. Он является частным случаем более общего распределения, описываемого законом Ципфа. Дж. Ципф установил, что если к достаточно большому тексту составить список всех встретившихся в нем слов и расположить их в порядке убывания частоты встречаемости в данном тексте, то для любого слова произведение его порядкового номера (ранга) на эту частоту есть постоянная величина, имеющая одинаковое численное значение в данном тексте. Этому закону подчиняется распределение не только слов во всех языках мира, но и других явлений социального характера: ученых по числу опубликованных ими работ, городов по численности населения, людей по размерам дохода и даже биологических родов по числу входящих в них видов.
Закон Бредфорда отражает одно из свойств открытой социальной системы, каковой и является научная литература по предмету, а именно - стабильность ее иерархической структуры. Некоторое отличие этого закона от ципфовского распределения объясняется спецификой периодических изданий как формы квантования научной литературы. Эти издания обладают большой инерционностью: изменения в их профилях и номенклатуре происходят значительно медленнее, чем в содержании статей, которые непосредственно отражают все процессы в науке и технике.
Закон рассеяния публикаций имеет большое практическое значение. Из него следует, что охват всех публикаций по какой-либо отрасли или предмету не может быть обеспечен, если ограничиться просмотром лишь профильных журналов и журналов по родственной тематике - для этого приходится просматривать значительную часть научно-технических журналов. Этот закон учитывается при организации национальных информационных систем. Он позволяет решить ряд практических задач информационной деятельности:
определять число журналов, которые обеспечивают тот или иной процент всех публикаций по какой-либо отрасли или предмету;
составлять списки журнальных публикаций по теме с гарантированной степенью полноты;
оценивать полноту библиографических списков журнальных публикаций;
комплектовать журнальные фонды при фиксированных ассигнованиях;
вычислять длину полок, необходимых для хранения фонда журналов.
Предыстория и сущность
В основе этого понятия лежит представление о том, что поиск необходимой информации в любом собрании документов практически невозможен путем прочтения или даже беглого просмотра текстов всех документов данного собрания. Поэтому уже с незапамятных времен для поиска информации применяют ряд логических процедур, которые в совокупности и составляют процесс информационного поиска. Прочтение полного текста документа заменили просмотром заглавий, аннотаций, рефератов. Однако и эта процедура в многотысячных собраниях документов оказалась слишком трудоемкой. Документы пришлось систематизировать по содержанию, которое условно стали обозначать индексами, т. е. буквами и/или цифрами. Систематизация по разделам наук (классам) - один из самых первых способов раскрытия содержания научно-технических документов, моделирующий работу человеческого сознания и восходящий к глубокой древности.
По мере увеличения количества письменных и печатных документов и объема наших знаний о мире их классификация усложнялась. Эти классификации получили название иерархических. Многотомные схемы клас-сификации конца прошлого - начала нашего века насчитывали десятки тысяч классов, подклассов, отдельных рубрик. Специалистам смежных областей знания и особенно массовому читателю библиотек стало трудно ориентироваться в схемах классификации и определять в их иерархии место той рубрики, по которой необходимо получать информацию.
Да и сами рубрики, которые строго ориентированы на узкие разделы наук, подвергающихся непрерывному процессу дифференциации, перестали удовлетворять специалистов-практиков, которым нужна была все более комплексная, предметная информация. Это привело к созданию в 70-х годах XIX в. предметной или, точнее, алфавитно-предметной классификации. На долгие годы она стала господствующей при составлении энциклопедий, вспомогательных указателей к трудам, систематически излагающим проблему или раздел науки, а в США, где она была создана, - при организации каталогов.
Стремительный рост объемов литературы значительно усложнил также задачу идентификации каждого произведения печати. Библиотеки первыми столкнулись с необходимостью создать инструмент, при помощи которого можно было бы быстро и надежно устанавливать наличие определенного произведения в их фондах. Таким инструментом стал в XIX в. авторский, именной указатель (алфавитный каталог, по библиотечной терминологии), который однозначно идентифицировал произведение по фамилиям лиц, принимавших участие в его создании или же свя-занных с его содержанием. Таким образом, до середины ХХ в. возможности содержательного поиска информации по справочникам или документов, содержащих нужную информацию, в библиотеках ограничивались тремя способами: систематическим, предметным и алфавитным.
Традиционной технологией реализации этих способов были списки, перечни книг и статей, содержавших необходимую информацию. С 70-х годов XIX в. эти сведения стали записываться на дискретных носителях - библиотечных карточках из плотного картона формата 75х125 мм (размер сложенной пополам американской почтовой карточки). Следует отдать должное этой традиционной технологии. Она успешно обеспечивала культурный прогресс на протяжении целого столетия вплоть до нынешнего этапа научно-технической революции, позволила накапливать и использовать многомиллионные собрания документов, обслуживать тематические потребности ученых и специалистов в необходимой им информации. На ней и сегодня еще в значительной степени зиждется деятельность всей мировой библиотечной системы - этого краеугольного камня человеческой культуры, важными составными частями которой является наука и техника.
Однако недостаточность, ограниченность этой технологии стала все более остро ощущаться уже в первой четверти ХХ в. В науке первыми почувствовали это химики из-за быстрого роста числа синтезируемых ими веществ. Обычные методы оповещения - библиографические указатели, библиотечные каталоги, справочники - начали значительно отставать по времени от успехов исследователей и перестали охватывать их результаты в полном объеме. Революции в физике и электронике, характеризующие середину прошлого столетия, усугубили трудности информационной коммуникации.
Научное сообщество осознало необходимость организационного оформления информационной деятельности, которая в течение нескольких десятилетий подспудно созревала в недрах науки и техники. Большая наука индустриального типа, пришедшая на смену "малой" науке университетского типа, выдвинула задачу создания систем научно-технической информации. Именно в это время, в конце 40-х - начале 50-х гг. прошлого века были сформулированы понятия информационного поиска, информационно-поисковой системы, информационно-поискового языка, была выдвинута задача механизации, а затем и автоматизации информационного поиска.
К этому времени стало ясно, что информационный поиск - это совокупность логических процедур, в результате которых в ответ на информационный запрос выдается либо необходимая информация, либо документы, в которых она может содержаться, либо библиографические адреса этих документов. В первом случае поиск получил название фактографического, во втором - документального, в третьем - библиографического. Эти процедуры сводятся к следующему.
Каждый вновь появляющийся документ подвергается анализу, в результате которого определяется его смысловое содержание. Затем это абстрактное представление о содержании (считается, что оно должно совпадать с авторским) выражается на некотором информационно-поисковом языке, т. е. синтезируется в виде библиографического описания и индекса.
Индекс образуется путем мысленного сопоставления основного смыслового содержания с потенциальными запросами потребителей информации. Эти запросы как бы зафиксированы в схемах классификации и обозначены индексами. Сама процедура выражения основного смыслового содержания документов и информационных запросов на информационно-поисковом языке получила название индексирования и составляет существенную часть аналитико-синтетической обработки документов. Информационный поиск, таким образом, заключается в замене содержательного прочтения полного текста документов формальным сличением (сравнением на соответствие) их поисковых образов с запросами на языке индексов.
Понятно, что такая замена значительно упрощает и убыстряет нахождение нужной информации, делает возможной автоматизацию процедуры сравнения. Но за это приходится платить неполнотой и неточностью поиска. Описанные выше логические процедуры допускают субъективизм осуществляющих их лиц, а используемые информационно-поисковые языки несовершенны и не способны адекватно передавать содержание документов и смысл запросов. Следовательно, информационные потери и шум - неизбежные условия информационного поиска. Когда говорят, что поиск осуществлен со 100-процентной полнотой, имеют в виду, что информационного поиска не производилось, а был осуществлен полный перебор всех текстов (современная технология в некоторых случаях предоставляет такую возможность).
Информационный поиск реализуется при помощи информационно-поисковой системы, которая в абстрактном виде должна состоять из информационно-поискового языка, правил перевода на этот язык и критерия смыслового соответствия, определяющего объем выдачи документов или информации (критерий выдачи). Конкретная система включает также средства реализации (перечень, картотека, механический селектор, компьютер), информационный массив и обслуживающий персонал.
|
