Индексы научного цитирования — инструмент неуниверсален

Журнальные публикации — практически единственный «видимый след» научной коммуникации, и именно с их помощью можно получить объективные показатели, характеризующие процесс получения и накопления знаний. Библиографические указатели давно используют для поиска необходимых источников информации. Сегодня их электронные версии вполне заменили печатные на этом поприще, так что интернетовский PubMed отправил бумажную версию «Index Medicus» на заслуженный отдых (см. «Еженедельник АПТЕКА» № 30 (551) от 7 августа 2006 г.). Но не все специалисты, которым так или иначе приходится работать с источниками информации, знают о том, как определяются библиометри­ческие параметры периодических изданий и какое это имеет значение для издателей и авторов.

Интерес к оценке публикаций по цитируемости сохраняется на протяжении вот уже 75 лет. Первую попытку сравнить научные периодические издания по этому признаку предприняли еще в конце 20-х годов прошлого века (Gross P.L.K., Gross E.M., 1927). Позднее, в том числе благодаря усилиям Эстель Бродман (Estelle Brodman), изучавшей журналы по физиологии, эти методики были усовершенствованы (Brodman E., 1944).

На протяжении многих лет вдохновителем и организатором развития этой идеи является Юджин Гарфилд (Eugene Garfield), доктор философии, основатель нынешней «Thomson Scientific» — части корпорации «Thomson» — ведущего мирового провайдера информации для профессионалов (www.thomson.com).

Впервые об индексе цитат (citation index) Ю. Гарфилд написал в 1955 г. в журнале «Science». Этот проект ученого и издателя, имеющего степень бакалавра по химии и магистра по библиотековедению, получил развитие в виде «Указателя библиографических ссылок в научной литературе» (Science Citation Index — SCI), изданного впервые в 1963 г. (Garfield E., 1996). Указатель 1965 г. содержал сведения о 3,3 млн ссылок в 196 тыс. публикациях по всем точным, естественным и прикладным наукам и в 60 тыс. патентных описаниях США.

SCI содержит список всех работ, которые упоминались в какой-либо из публикаций текущего года, и состоит из двух частей, издаваемых в виде отдельных томов — собственно «Указателя цитированной литературы» и «Указателя источников». С 1975 г. основанная Ю. Гарфилдом организация ежегодно издает «Отчеты о цитируемости журналов» (Journal Citation Reports — JCR), где приводит данные о более чем 7,5 тыс. научно-технических журналов свыше 3,3 тыс. издателей из 6 десятков стран.

Для того чтобы отбирать журналы для SCI, в начале 1960-х годов Ю. Гарфилд с коллегами разработал способ вычисления импакт-фактора (impact factor). Необходимость в нем возникла в связи с тем, что использование количества статей или частоты их цитирования в качестве критериев приводило к исключению небольших или специализированных изданий (Garfield E., 2005).

ОПРЕДЕЛЕНИЕ ЦИТИРОВАНИЯ

Процесс цитирования удачно описан в обзорной статье, подготовленной Научной электронной библиотекой — главным исполнителем проекта по созданию Российского индекса научного цитирования (Писляков В.В., 2005).

Рис. 1. Подсчет цитирований (Писляков В.В., 2005)
Рис. 1. Подсчет цитирований (Писляков В.В., 2005)
Рис. 2. Определение классического (синхронного, Гарфилдовского) импакт-фактора (Писляков В.В., 2005)
Рис. 2. Определение классического (синхронного, Гарфилдовского) импакт-фактора (Писляков В.В., 2005)

Итак, статья А цитирует статью Б, если хотя бы один раз в тексте А имеется ссылка на Б. Журнал J цитирует журнал I столько раз, сколько статей из J цитируют статьи из I. Таким образом, если в тексте одной статьи другая публикация упоминается несколько раз, это считается одним цитированием, и в ситуации, отраженной на рис. 1, журнал I получил 5 цитирований из журнала J (рис. 1).

Абсолютное количество цитирований того или иного издания, как указано выше, не может считаться достаточно объективным показателем для оценки качества публикаций. К примеру, издание «The Journal of Biological Chemistry» является одним из наиболее часто цитируемых за всю историю науки, и оно же — одно из самых объемных. Среди большого количества публикуемых в подобных журналах статей (несколько тысяч в год), естественно, есть более и менее качественные, более и менее интересные. Поэтому, несмотря на частое цитирование всех публикаций в общей сложности, количество ссылок на каждую отдельно взятую статью может быть небольшим по сравнению с некоторыми небольшими, особенно обзорными, журналами.

Классический импакт-фактор, то есть то, что понимают под ним по умолчанию, пишет В. Писляков, — это в строгом определении «синхронный двухлетний импакт-фактор, без учета текущего года». Именно он вычисляется Институтом научной информации (Institute for Scientific Information®— ISI) и ежегодно публикуется в базе данных JCR. Именно SCI чаще всего фигурирует (по крайней мере вне наукометрических кругов) при сравнении уровня журналов.

С помощью этого показателя оценивают, сколько раз за определенный период цитировали «среднюю статью» того или иного издания. Классический импакт-фактор определяют как соотношение между количеством ссылок за год на статьи журнала, опубликованные за два предшествовавших года, и количеством этих статей. Методика его расчета достаточно проста. Например, если определяют индекс цитируемости (С) за 2005 г.:

Таблица
Список журналов, отсортированных по величине импакт-фактора за 2004 г., из JCR в категории «Медицина, общие и внутренние болезни» (Garfield E., 2005)

Сокращенное название журнала

Общее количество ссылок

Импакт-
фактор

Количество
статей

NEW ENGL J MED

159 498

38,570

316

JAMA-J AM MED ASSOC

88 864

24,831

351

LANCET

126 002

21,713

415

ANN INTERN MED

36 932

13,114

189

ANNU REV MED

3188

11,200

29

ARCH INTERN MED

26 525

7,508

282

BRIT MED J

56 807

7,038

623

CAN MED ASSOC J

6736

5,941

100

AM J MED

21 000

4,179

285

MAYO CLIN PROC

6816

3,746

161

MEDICINE

4255

3,727

30

ANN MED

2626

3,617

79

J INTERN MED

4793

3,590

135

AM J PREV MED

3972

3,188

143

CURR MED RES OPIN

1148

2,928

212

J GEN INTERN MED

4686

2,821

163

QJM-INT J MED

4073

2,580

73

EUR J CLIN INVEST

4332

2,530

110

PREV MED

5372

2,327

287

J PAIN SYMPTOM MANAG

2941

2,187

117

А — количество ссылок в 2005 г. на работы, опубликованные в журнале J за 2003–2004 гг.;

В — общее количество работ, опубликованных в журнале J за 2003–2004 г.;

С = А/В.

При расчете импакт-фактора в общем количестве публикаций не учитывают некоторые виды статей, а именно: новости, письма, список опечаток. Наоборот, в числителе формулы считают цитирование всех видов публикаций. При таком подходе к расчету журналы, которые публикуют много писем в редакцию, получают существенное преимущество (Писляков В.В., 2005).

Благодаря широкому охвату периодических изданий и информативности импакт-индекс завоевал мировое признание, вышел за пределы чисто теоретического интереса и стал широко использоваться в издательских и научных кругах как способ оценки научных журналов и деятельности отдельных ученых. Анализ цитирования позволяет выявлять значимые результаты и оценивать продуктивность научной работы. Этот метод используется в наукометрии. С 1993 г. в развитие этой дисциплины вносит свой вклад Международное общество наукометрии и инфометрии (International Society for Scientometrics and Infometrics — ISSI) (www.issi-society.info).

SCI — наиболее популярный наукометрический инструмент. Ю. Гарфилд с коллегами в течение многих лет изучает возможности его использования, достоинства и недостатки. «Многие сегодня забывают, что SCI в его нынешнем виде — это не счетчик ссылок, а библиографическое пособие», — пишет ученый. Использовать его для оценки деятельности ученых, издательств или других организаций нужно корректно, подчеркивает Ю. Гарфилд. Это — задача не слишком простая, и беглого взгляда на соответствующие рубрики SCI явно недостаточно (Garfield E., 2005).

Что такое цитирование и что означает факт цитирования вашей работы? Социологи показали, отмечает Ю. Гарфилд, что ссылки составляют часть действующей в науке системы вознаграждения. Процитировать кого-то означает признать воздействие цитируемого автора на твою работу; это — своеобразный способ уплаты долга тому, кого ты цитируешь. Показатели цитируемости вовсе не призваны измерить качество работы само по себе, безотносительно к ее функционированию в науке. Они лишь индикаторы, показывающие, что эта работа с достаточно высокой вероятностью может оказаться весьма значительной.

Некоторые издания указывают значение собственного импакт-фактора на своих веб-страничках (особенно те, которым есть чем гордиться). Многие крупные библиотеки подписаны на материалы ISI, среди которых — и сведения об импакт-факторе. Подобную информацию можно найти в других интернет-источниках, которые предоставляют к ней бесплатный доступ (www.ire.kharkov.ua; www.biblioteca.cbpf.br; www.uniklinikum-saarland.de). Однако самой свежей информации об импакт-факторах там может не быть.

Как можно судить из данных, приведенных Ю. Гарфилдом, журнал-лидер «New England Journal of Medicine» по значению импакт-фактора существенно отрывается от остальных периодических изданий (таблица). Как сотрудникам издательства, выпускающего журнал «Experimental Oncology», нам приятно отметить, что его импакт-фактор в 2004 г. составил 0,298, что сравнимо с таковым у американского журнала «Experimental Mathematics» — 0,356 (www.ire.kharkov.ua).

НЕДОСТАТКИ ИМПАКТ-ФАКТОРА

Наряду с очевидными достоинствами импакт-фактора у него есть и недостатки, то есть особенности, которые необходимо учитывать при интерпретации его значений. Это, главным образом, влияние социологических и статистических факторов. К первым относят специфическую область деятельности журнала, характер публикаций (обзоры, исследовательские статьи, письма) и среднее количество авторов одной публикации. Среди статистических факторов указывают количество публикуемых в журнале статей и временное «окно цитирования» (Amin M. and Mabe M., 2000).

Количество цитат статьи в определенном журнале не измеряет ни качества журнала, ни научной ценности статьи, а всего лишь частично отражает численность публикаций в отдельной области науки, текущую популярность тематики статьи и читаемость издания. Специализированные журналы с узкой читательской аудиторией всегда будут иметь невысокий индекс цитируемости, несмотря на научную ценность и актуальность публикуемых статей. При помощи SCI не индексируются сравнительно малоизвестные журналы по клинической и узкоспециальной тематике, что, конечно же, негативно воспринимают издатели из стран третьего мира.

Также, временное «окно» при подсчете цитирований достаточно узкое, что, в некоторых случаях, не дает возможности определенной публикации найти отзыв у аудитории. Поэтому многие ученые уже пришли к выводу, что двухлетний период «окна цитирования» слишком мал, и отдают предпочтение 5-летнему (Гиляревский Р.С. и соавт.,1967).

При интерпретации импакт-фактора следует учитывать специфику соответствующей области знаний. Хорошо известно, что импакт-факторы журналов принципиально отличаются для разных дисциплин. Так, издания по клеточной биологии, например, характеризуются гораздо более высокими показателями, чем по математике или истории. Кроме того, при определении импакт-фактора можно учитывать цитирования, полученные из всех журналов, охваченных индексом цитирования, а можно — только издания, отнесенные к той дисциплине, к которой принадлежит журнал. Каждый метод имеет свои недостатки (Писляков В.В., 2005).

Поскольку библиометрические показатели давно вышли из плоскости исключительно вспомогательного средства при формировании и пополнении библиотек и превратились в критерий оценки успешности определенного издательского проекта, понятно стремление отдельных редколлегий повысить этот показатель, в том числе — путем отбора для публикации определенного вида материалов. Обычно повышенным спросом у ученых и читателей пользуются обзорные статьи, так как они подытоживают уже полученные результаты и отражают достижения научной мысли по определенному вопросу на сегодняшний день (Garfield E., 1996).

Пожалуй, самыми непредсказуемыми являются статьи, содержащие спорные, противоречивые данные. Они либо остаются вообще незамеченными, либо вызывают бурную дискуссию, что делает их широко цитируемыми. Редакция журнала вполне может отклонить рукопись, которой суждено стать блокбастером. Ю. Гарфилд приводит в этой связи статью, посвященную инфекции Helicobacter pylori, лауреатов Нобелевской премии по физиологии и медицине за 2005 г. Барри Маршалла (Barry Marshall) и Робина Уоррена (Robin Warren) (Marshall B.J., Warren J.R., 1984) (Garfield E., 2005).

В последнее время увеличилось количество работ, в которых о результатах крупных многоцентровых международных клинических или эпидемиологических исследований сообщает большая группа авторов (Garfield E., 1996). Такие статьи, как свидетельствует неопубликованное исследование ISI, цитируемое Ю. Гарфилдом, характеризуются более высоким SCI, и издатели активно конкурируют между собой за эти лакомые кусочки.

Однако кроме отбора материалов к печати, существуют и другие методы искусственного завышения индекса цитируемости. Так, некоторые издания отдают предпочтение рукописям, содержащим ссылки на работы, опубликованные ранее этим же журналом. Понятно, что подобная издательская политика не приветствуется. Ю. Гарфилд называет боязнь искажающего воздействия самоцитирования недоразумением. Это явление в известном смысле оправдано, пишет он, так как часто публикация ученого продолжает его прежние работы. Увеличить же его настолько, чтобы существенно завысить показатели цитируемости, вряд ли возможно. Такая практика слишком бросается в глаза, и рецензирование ставит этому достаточно надежный барьер.

Другое заблуждение, против которого решительно выступает идеолог импакт-фактора, — боязнь завышения показателей цитируемости за счет критических или негативных ссылок. По его мнению, ученые не склонны отвлекаться на опровержение нестоящих работ, и публикация, получившая много критических ссылок, с полным основанием может рассматриваться как достаточно значительная, чтобы тратить время на полемику с ней (Garfield E., 2005).

РАЗНООБРАЗИЕ БИБЛИОМЕТРИЧЕСКИХ ПОКАЗАТЕЛЕЙ

Интересно, как связаны между собой обычный и кумулятивный импакт-факторы? Нередко последний (например, за период 1990–2005 гг. для статей, опубликованных в 1990–1995 гг.) выше первого по значению. Это вполне объяснимо, поскольку интерес ко многим публикациям нарастает постепенно, по мере «созревания» читательской аудитории для восприятия новой концепции или параллельно ее дальнейшему развитию. В традиционных областях клинической медицины (дерматология, к примеру) новые идеи получают признание позднее, чем в теоретических дисциплинах (молекулярная биология).

С целью более точно охарактеризовать цитируемость вычисляют индекс оперативности — отношение числа полученных в некотором году ссылок на статьи, вышедшие в том же самом году, к суммарному числу статей, вышедших в данном году в журнале. Он показывает, насколько быстро становятся известны в научном мире опубликованные статьи.

Также к основным библиометрическим показателям относят коэффициент самоцитирования журнала. Исключение самоцитирования при вычислении импакт-факторов журналов незначительно влияет на рейтинг ведущих изданий с большим импактом, тогда как на некоторые менее цитируемые издания изъятие цитат на самих себя оказывает ощутимое влияние (Писляков В.В., 2005).

Совершенствование электронных средств обработки данных ведет к созданию новых инструментов для работы с индексами научного цитирования. Так, в 2006 г. Йоханом Болленом (Johan Bollen), Марко А. Родригесом (Marko A. Rodriguez) и Гербертом Ван де Сомпелем (Herbert Van de Sompel) было предложено использовать алгоритм PageRank, которым пользуется «Google» для определения рейтинга интернет-ссылок.

КАК ЗАРУБЕЖНОЕ ИЗОБРЕТЕНИЕ ПРИМЕНЯЮТ НАШИ БИБЛИОТЕКАРИ

Нина Чернуха
Нина Чернуха

Об использовании наукометрических методов в современном библиотечном деле корреспондент «Еженедельника АПТЕКА» побеседовала с заведующей отелом комплектования и научной индексации иностранной литературы Государственной научной медицинской библиотеки Ниной Чернухой.

— Нина Александровна, как обстоят дела со значениями импакт-фактора отечественных журналов?

— Проблема такова. Мы стараемся максимально удовлетворить интерес читателей к отечественным медицинским журналам, независимо от того, как долго они издаются. Поэтому у нас представлены практически все украинские медицинские издания. Однако, к сожалению, честью быть индексированными ISI удостоено ограниченное количество отечественных журналов. Но это, несомненно, свидетельствует об их признании. Среди них — «Experimental Oncology», «Врачебное дело», «Клиническая хирургия», «Фізіологічний журнал», однако и они пребывают в поиске широкого круга читателей и не могут конкурировать с общепризнанными мировыми лидерами, такими как «New England Journal оf Medicine» или «The Lancet».

— Как часто вы пользуетесь индексом цититуемости при подборке иностранных журналов?

— Следует понимать, как именно формируется фонд иностранной литературы. Существуют три основных источника: гуманитарная помощь, международный книгообмен и подписка за бюджетные деньги. Мы очень благодарны американскому институту «Открытое общество» за помощь в предоставлении онлайнового доступа к полнотекстовым журналам в области биологии и медицины.

Также мы участвуем в проекте «Электронная информация для библиотек», что позволило наладить сотрудничество с компанией «EBSCO Publishing» на хороших условиях. Также следует отметить ряд организаций-дарителей. Среди них — фонд «Сейбр-Світло», компании «Каунтерпарт», «ЕЗРА», Общество украинских врачей Северной Америки, «Восточно и Центральноевропейский благотворительный проект» (США), проект «Освіта» (Канада), Немецкий культурный центр «Гёте-Институт», Британский совет, Французский культурный центр, «Американский дом» и многие другие организации, а также частные лица. Благодаря их стараниям мы пополнили свой фонд иностранных журналов более чем на 15 тыс. экземпляров.

Также важным источником поступления новой литературы является Всемирная организация здравоохранения (ВОЗ). С 2000 г. библиотека включена в регистр обязательного получения 2 наименований периодических изданий ВОЗ, что является только первым достижением на пути возобновления хороших отношений с этой организацией, так как в период с 1994 по 1999 г. библиотека вообще не получала литературы ВОЗ.

Книгообмен сегодня переживает нелучшие времена. Проблема заключается не только в ситуации в мире, переходе стран Восточной Европы и Украины к рыночным отношениям, подорожании печатных изданий, сокращении финансирования, но и в недоразумениях с государственными учреждениями, например с Киевской региональной таможней. Однако вопреки сложностям мы обмениваемся литературой с 32 научными учреждениями и библиотеками 17 стран Европы и Америки.

В подборе периодической литературы учитывается постоянно изучаемый читательский спрос на конкретные издания, а также традиции. Очень важно, чтобы специалисты в разных областях медицины нашли нужный для себя журнал, не важно в печатной или электронной версии. Например, начиная с послевоенного времени, год за годом мы предлагаем нашим специалистам «The Lancet». Он востребован, что подтверждает хороший вкус наших читателей.

Так что, как видите, глубокий анализ изданий исходя из их индекса цитируемости не проводится, однако мы интересуемся разными показателями востребованности журналов и нам приятно, что мы можем предложить нашим читателям как топ-издания с высоким импакт-фактором, так и большую подборку менее известных, но традиционных для нас изданий.

Елена Полякова
Елена Полякова

Свои комментарии согласилась дать и Елена Полякова, главный библиотекарь центра формирования библиотечно-информационных ресурсов Национальной библиотеки Украины имени В.И. Вернадского.

— Елена Владимировна, каких принципов Вы придерживаетесь при комплектовании библиотечных фондов?

— Национальная библиотека Украины имени В.И. Вернадского осуществляет комплектование не только своих фондов, но и фондов других библиотек системы НАН Украины. Наши действия регламентируются «Положением о централизованном комплектовании фондов библиотек системы Национальной академии наук Украины иностранной литературой». При этом мы придерживаемся принципов научности, относительной полноты и координации. То есть, мы пытаемся подобрать издания, отражающие новейшие достижения в области естественных, технических и общественных наук, которые являются научно значимыми и максимально информативными. Кроме того, мы учитываем пожелания научно-исследовательских учреждений НАН Украины. Очень важно, чтобы ученые могли получить не просто новейшие данные в определенной сфере знаний, но как можно больше информации в области проводимых ими исследований.

— Какова роль индекса цитируемости при выборе изданий?

— Значение этого показателя можно узнать только для небольшого количества периодических изданий. Наши интересы выходят за эти рамки. В ближайшем будущем научные библиотеки станут «гибридными», то есть к услугам читателей будут предложены не только традиционные печатные издания, но и документы на электронных носителях, а также сетевые базы данных.

Учитывая ограниченность финансирования и неизменное повышение цен на печатные издания, в последнее время мы все чаще отдаем предпочтение приобретению электронной информации. Так, в 2006 г. ученым различных специальностей обеспечен доступ к 10 тыс. наименований журналов в электронной версии. Среди них представлены и самые рейтинговые. Некоторые базы данных постоянно обновляются, что обеспечивает регулярное поступление свежей информации. Далее, мы получаем журналы не только на английском, но и немецком, французском, итальянском и японском языках.

Вообще, поскольку роль информации в современном мире только увеличивается, способов оценки ее качества будет становиться все больше, как и провайдеров такой информации. n

Ирина Смольянинова, Дарья Полякова, фото Игоря Кривинского

Бажаєте завжди бути в курсі останніх новин фармацевтичної галузі?
Тоді підписуйтесь на «Щотижневик АПТЕКА» в соціальних мережах!

Коментарі

Коментарі до цього матеріалу відсутні. Прокоментуйте першим

Добавить свой

Ваша e-mail адреса не оприлюднюватиметься. Обов’язкові поля позначені *

*