СОВРЕМЕННЫЕ ТЕХНОЛОГИИ В ИНФОРМАЦИОННОМ ОБЕСПЕЧЕНИИ НАУКИ

СИНЕРГЕТИЧЕСКИЙ ПОДХОД
К ОПРЕДЕЛЕНИЮ ИНДЕКСОВ
ЦИТИРОВАНИЯ

В.Б. Сверчкова
(Институт автоматики и процессов управления ДВО РАН)

Доклад посвящен анализу существующих технологий и базовых источников для определения индексов цитирования ученого, научной лаборатории, академического института в целом с точки зрения синергетического подхода к оценке продуктивности научного коллектива.

25 февраля 2003 г. Президиум РАН своим постановлением № 77 ввёл в действие Методические указания по проведению комплексных проверок научных организаций Российской академии наук. В разделе II "Научная деятельность", в пункте 6 "Количественные показатели результатов научной деятельности организации", был введен показатель "индексы цитирования", который ранее не использовался в такого рода оценках результатов научной деятельности институтов РАН.

Институт автоматики и процессов управления (ИАПУ) ДВО РАН по утвержденному Президиумом РАН плану-графику оказался в числе первых проверяемых институтов. Поэтому по новому показателю оценки сразу возникли технологические вопросы "на какой базе и как".

Согласно сложившейся технологии по базе данных указателя научного цитирования "Science Citation Index (SCI)" количественно были определены публикации ведущих сотрудников ИАПУ, включенные в SCI (предварительные данные):

№ лаб.

ФИО

ФИО (англ. д/поиска)

Количество публикаций сотрудников за год

1998

1999

2000

2001

2002

2003

Всего

Дир-р

МЯСНИКОВ В.П.

MYASNIKOV VP

0

0

1

1

0

0

2

11

НУРМИНСКИЙ Е.А.

NURMINSKY EA

0

0

0

0

0

0

0

12

БОБКОВ В.А.

BOBKOV VA

0

0

0

0

0

0

0

32

ФРИСМАН Е.Я.

FRISMAN EY

0

0

0

0

0

0

0

34

АЛЕКСАНИН А.И.

ALEKSANIN AI

0

0

0

0

0

0

0

34

АЛЕКСАНИНА М.Г.

ALEKSANINA MG

0

2

0

0

0

0

2

36

БУРЕНИН А.А.

BURENIN AA

0

0

1

0

0

0

4

36

ГУЗЕВ М.А.

GUZEV MA

1

0

1

1

0

0

5

37

КУЛЬЧИН Ю.Н.

KULCHIN YN

3

0

1

0

0

0

4

38

ЛЕВИН В.А.

LEVIN VA

 

 

 

 

2

2

4

61

АБРАМОВ О.В.

ABRAMOV OV

0

0

0

0

0

0

0

64

ФИЛАРЕТОВ В.Ф.

FILARETOV VF

0

1

0

2

1

1

0

64

ЖИРАБОК А.Н.

ZHIRABOK AN

3

1

2

2

1

1

10

64

ШУМСКИЙ А.Е.

SHUMSKII AE

1

0

0

0

1

0

2

71

КЛЕЩЕВ А.С.

KLESHCHEV AS

2

0

1

1

0

0

4

74

ДЕВЯТИСИЛЬНЫЙ А.С.

DEVYATISILNY AS

0

0

0

0

0

1

8

82

КИНШТ Н.В.

KINSHT NV

0

0

0

0

0

0

9

84

ЧИПУЛИС В.П.

CHIPULIS VP

0

0

1

0

1

0

2

101

ЛИФШИЦ В.Г.

LIFSHITS VG

12

8

7

6

5

0

9

101

ЗОТОВ А.В.

ZOTOV AV

14

8

7

5

4

0

9

102

КОРОБЦОВ В.В.

KOROBTSOV VV

1

1

0

0

0

0

4

103

ПЛЮСНИН Н.И.

PLUSNIN NI

0

3

3

1

2

0

47

104

САРАНИН А.А.

SARANIN AA

10

6

8

3

4

0

31

105

ГАЛКИН Н.Г.

GALKIN NG

2

3

5

6

3

0

6

ИТОГО по ИАПУ

 

 

49

33

38

28

24

5

177

 

и цитируемость работ сотрудников института за последние 5 лет (предварительные данные):

№ лаб.

ФИО

ФИО (англ. д/поиска)

Количество ссылок за год

98

99

2000

2001

2002

2003

Всего

Дир-р

МЯСНИКОВ В.П.

MYASNIKOV VP

1

3

3

2

1

1

11

11

НУРМИНСКИЙ Е.А.

NURMINSKY EA

0

1

0

0

0

0

1

12

БОБКОВ В.А.

BOBKOV VA

1

0

0

0

0

0

1

32

ФРИСМАН Е.Я.

FRISMAN EY

0

0

1

0

0

1

2

34

АЛЕКСАНИН А.И.

ALEKSANIN AI

0

1

0

0

0

0

1

34

АЛЕКСАНИНА М.Г.

ALEKSANINA MG

0

0

0

1

0

0

1

36

БУРЕНИН А.А.

BURENIN AA

0

0

1

0

0

0

2

36

ГУЗЕВ М.А.

GUZEV MA

2

1

1

2

0

0

6

37

КУЛЬЧИН Ю.Н.

KULCHIN YN

3

7

1

0

0

0

11

38

ЛЕВИН В.А.

LEVIN VA

 

 

 

 

2

2

4

61

АБРАМОВ О.В.

ABRAMOV OV

0

0

0

0

0

0

0

64

ФИЛАРЕТОВ В.Ф.

FILARETOV VF

1

1

1

1

1

1

6

64

ЖИРАБОК А.Н.

ZHIRABOK AN

3

2

4

4

2

1

16

64

ШУМСКИЙ А.Е.

SHUMSKII AE

2

0

1

1

1

0

5

71

КЛЕЩЕВ А.С.

KLESHCHEV AS

2

0

0

1

0

0

10

74

ДЕВЯТИСИЛЬНЫЙ А.С.

DEVYATISILNY AS

0

0

0

0

0

0

13

82

КИНШТ Н.В.

KINSHT NV

0

0

0

0

0

0

0

84

ЧИПУЛИС В.П.

CHIPULIS VP

0

0

0

0

0

0

0

101

ЛИФШИЦ В.Г.

LIFSHITS VG

 

 

23

68

9

0

101

ЗОТОВ А.В.

ZOTOV AV

 

 

 

32

59

9

100

102

КОРОБЦОВ В.В.

KOROBTSOV VV

2

1

0

0

0

0

3

103

ПЛЮСНИН Н.И.

PLUSNIN NI

 

4

3

6

4

1

6

104

САРАНИН А.А.

SARANIN AA

 

 

 

53

40

7

24

105

ГАЛКИН Н.Г.

GALKIN NG

2

7

9

7

9

1

35

ИТОГО по ИАПУ

 

 

19

28

25

133

187

33

425

Те лаборатории, у которых эти показатели оказались относительно низкими, отрицательно отнеслись к полученным результатам.

Анализ обсуждения позволил выделить две основные обоснованные причины недовольства:

  1. сомнение в правомерности использования цитируемости для оценки научного вклада,

  2. и ограниченность базовой информации для определения цитируемости, т. е. использование базы данных SCI для такой работы необходимо, но явно недостаточно.

    Согласно данным, приведенным специалистами РФФИ (1), каждые 8-9- российских ученых из 10 не представлены в SCI. Принципы отбора научной периодики для включения в информационные продукты ISI предполагают соответствие не только научным, но и определенным издательским параметрам. Кроме того, SCI ориентирован в основном на англоязычную литературу. Поэтому, на наш взгляд, до создания российского аналога SCI, необходим учет цитирования в центральных российских изданиях, а также в докторских диссертациях.

    Позволяет ли измерение цитируемости верно оценить научный вклад? Действительно, цитирование отражает связь между работами ученых, говорит об использовании научных результатов - но оно отражает не все связи. Если труды ученого цитируются широко, то это в общем случае указывает на то, что его продукция высоко оценивается и в большой степени используется другими учеными. Но обратное утверждение в общем случае неверно. А для того чтобы цитируемость могла служить основой оценки научного вклада, необходимо, чтобы были верны как прямое, так и обратное утверждение.

    Почему цитирование не отражает полной картины научных коммуникаций?

    Во-первых, в самоорганизующейся системе научных коммуникаций установились определенные нормы цитирования (несколько разные в разных областях науки), т.е. устанавливается некоторый ценз, порог ценности статьи для данной работы. Поэтому аппарат ссылок отражает лишь небольшой фрагмент всей получаемой и используемой ученым информации. Во-вторых, далеко не все сообщения, необходимые для работы, достигают автора статьи. Целый ряд барьеров препятствует проникновению к потребителю даже опубликованной информации. Множество барьеров, синергически взаимодействуя и усиливая друг друга, образуют вокруг каждого ученого своеобразную "информационную скорлупу". В-третьих, как показывает опыт, при цитировании автор руководствуется не только ценностью статьи для своей работы. Например, Ю. Гарфилд отмечает, что цитирование может быть вызвано стремлением автора поднять свою собственную репутацию, связав свою работу с более крупными исследованиями, или стремлением избежать ответственности, ссылаясь на работы других авторов (2).

    Очевидно, что все перечисленное резко сокращает возможность использования цитируемости для оценки вклада в науку. Расширение же использования SCI как инструмента для оценки научной продуктивности индивидуальных работников неизбежно приведет к росту ненужного цитирования. Это наносит ущерб SCI как исключительно ценному средству информационного поиска и науковедческих исследований.

    Теперь о самом индексе цитирования ученого, научной лаборатории, института в целом. В научных кругах нет единого подхода к этому понятию. В монографии И.В. Маршаковой (основатель использования баз данных SCI в российской науке) "Система цитирования научной литературы как средство слежения за развитием науки" приводятся количественные факторы для журналов. Это: показатель воздействия журнала, показатель отклика на журнал, цитирующий и цитируемый показатель. В существующих источниках информации нет научно-обоснованной технологии определения индекса цитирования для отдельного ученого, научной лаборатории или института в целом (3). Инициаторы-практики при этом нередко смешивают понятия цитируемость, частота цитирования, индекс цитирования.

    Синергетический подход требует, чтобы:

  3. во-первых, все Отделения РАН (а не только Отделение биологических наук) принципиально определились с необходимостью использования цитируемости в оценке научного вклада;

  4. во-вторых, должна быть четко определена и утверждена научным сообществом база источников информации для определения цитируемости российских ученых (наше предложение - расширить ее, добавив к SCI список центральных журналов, утверждаемый ВАК, и докторские диссертации);

  5. в-третьих, необходимо разработать и принять единую методику определения показателя цитирования.

Литература

  1. Алфимов М.В., Либкинд А.Н., Либкинд И.А., Минин В.А. Информационные потоки в РФФИ: новый подход к цитированию//Вестник РФФИ, 2001, № 4(26), с. 5-23.

  2. Гарфильд Ю. Можно ли выявлять и оценивать научные достижения и научную продуктивность// Вестник АН СССР, 1982, № 7, с. 42-50

  3. Маркусова В.А. В списках не значатся //Поиск, 2003, № 3.