Significado y relevancia de los

indicadores bibliométricos

Layla Michán

Departamento de Biología Evolutiva,

Facultad de Ciencias, UNAM

4 de marzo, 2011 12:00 hrs

AUDITORIO BERNARDO QUINTANA

BIBLAT, ECUM Y SCIELO: INDICADORES

BIBLIOMÉTRICOS Y CIENCIOMÉTRICOS DE LAS

REVISTAS ACADÉMICAS MEXICANAS

Mesa redonda

ObjetivosDar a conocer a los editores de revistas mexicanas los nuevos

desarrollos enfocados en la generación de indicadores

bibliométricos y cienciométricos a partir de la información

publicada en las revistas académicas mexicanas indizadas en

CLASE, PERIÓDICA y SciELO-México.

El objetivo general del evento es refrendar la importancia de la

vinculación entre editores y los sistemas de indización, así

como la corresponsabilidad de ambos actores en la

comunicación científica y la representación de la ciencia

nacional a través de indicadores métricos.

OBJETIVO DE LA

PRESENTACIÓN

Exponer el significado y

relevancia de los indicadores

bibliométricos.

Los estudios métricos de la información científica

Consisten en la aplicación de métodos cuantitativos

a la investigación sobre el desarrollo, la estructura y

las relaciones de la ciencia:

• Infometría, 2003 (información)

• Ciencimetría (ciencia)

• Bibliometría, 1969 (Documentos)

• Cibermetría (páginas web o blogs)

Ciencimetría/Bibliometría• Se encarga de estudiar los aspectos cuantitativos de la información,

de la ciencia, de los documentos y las páginas electrónicas productode la investigación sobre el desarrollo de la ciencia, por lo quedesempeña un papel importante como instrumento de análisisy prognosis de las políticas de investigación.

• Implica el manejo de cantidades de datos inmensas (cientos y milesde documentos) y la aplicación de análisis estadísticos e indicadoresmatemáticos para reconocer las regularidades de la producción y ladifusión de la ciencia con respecto a diversas variables con lasdistintas unidades de análisis.

• Sintetiza en unos pocos parámetros, las características dedistintos grupos de datos, así como en la posibilidad que brindapara establecer pronósticos sobre tendencias futuras ydeterminar el efecto de diferentes factores en variables deinterés.

• Ofrece una base sólida para la toma de decisiones prácticas.

Elección de fuentes y recursos

Búsqueda

Extracción

carga

Diseño de la base de datos

relacional: tablas, relaciones y

formularios

Selección

Análisis bibliométrico

Traducción

Normalización y Depuración

Pruebas

Validación

Migración

Tratamiento cuantitativo: Indicadores

ciencimétricos y biliométricos,

métodos y modelos matemáticos, y

técnicas estadísticas (univariante,

bivariante y multivariante)

Registros y campos

Bases de datos

Frecuencia de variables y

tablas de contingencia

Regularidades

Interpretación: descripción,

comparación, contextualización

Análisis

Explicaciones

Consultas

Relaciones lógicas

Recuperación

Interpretación

Determinación, identificación y

parámetrosVisualización

Bibliometría

Elección de fuentes y recursos

Búsqueda

Aplicación Web

Interpretación

Indicadores y

visualización

Meta-análisis para PubMed

META-ANALISIS

Bibliometría Análisis de Redes

Text Mining

Historia

Se desarrolló alrededor de 1960, y considera a

la ciencia como un proceso informativo que

se ha caracterizado por:

El aumento geométrico de la información científica

contenida en libros científicos, revistas, series,

entre otras

El desarrollo de las bases de datos.

Derek De Solla Price

Revistas

Journal of the

American Society

for Information

Science JASIS,

Estados Unidos

Revista

Española de

Documentación

Científica

(España)

Scientometrics (Francia)

Especialistas

Loet LeydesdorffEugene Garfield

Derek de Solla Price

Francis Narin

Félix de Moya Anegón

Libros

Los análisis bibliométrico han atraído mucha atención en los últimos años por varias razones:

• El diseño de bases de datos de literatura científica con acceso electrónico en todo el mundo (SCI, PubMed, Scopus, Google Scholar, etc);

• La disponibilidad de herramientas eficaces para llevar a cabo análisis automáticos.

• Representan sustento con los datos empíricos a la historia, la filosofía y sociología de la ciencia.

• Permite describir:• Las tendencias recientes de la investigación,

• Los resultados del esfuerzo de la posición nacional en relación a los demás,

• Evaluar las políticas nacionales y los laboratorios,etc

• Es un método ideal para investigar el desarrollo, la estructura, la dinámica y las relaciones de las ciencias

Bansard, et al. 2007 (

Características1. Es un método objetivo que permite conocer las condiciones que se

quieren estudiar, utiliza el análisis de dos evidencias esenciales

para ilustrar el desarrollo de la ciencia:

• Los científicos

• Las publicaciones científicas

2. Permite análizar y evaluar el estado de la ciencia y la tecnología

en varias naciones, pues se comparan los resultados obtenidos y

se elaboran las tendencias en el tiempo.

3. Instrumento de evaluación para fomentar y/o estudiar la praxis de la ciencia, definir estrategias y políticas de desarrollo científico nacionales e internacionales.

4. Este método suele ser anacrónico y dificulta delimitar los aportes científicos en un contexto histórico y espacial, es deseable combinarlo con otros métodos y contextualizar usando la historia, sociología y etnografía, por ejemplo.

Aplicaciones

• Recuperación de información.

• Administración de bibliotecas.

• Historia de las ciencias y las políticas científicas de una institución o gobierno.

• Desarrollo de modelos matemáticos y obtención de medidas para los diferentes fenómenos de la práctica científica.

• Los aspectos estadísticos del lenguaje y la frecuencia del uso de las palabras y frases.

• Las características de la productividad de los autores y su colaboración.

• Las características de las fuentes donde se publican los documentos, incluida su distribución por disciplinas.

• Demanda y circulación.

• Modelo de comunicación científica (enfoques de sistemas, modelos matemáticos, etc.).

• Patrones de comunicación, colaboración, flujo de información en ciencia y tecnología, migración (análisis de citas, factores de impacto de revista, flujos nacionales, internacionales, etc.).

• Producción científica (disciplinas, estudios de género, departamentos de investigación, institucionales, países, etc.).

• Indicadores de apoyo para toma de decisiones en política científica (economía, organización y administración, tecnologías de información y comunicación, gestión de recursos, pronósticos, impacto, evaluación).

• Aspectos teóricos de los estudios cuantitativos y cualitativos de la ciencia y la tecnología.

• Técnicas de minería de datos y textos aplicados a la obtención de indicadores.

• Análisis documental

• Creación y distribución de bases de datos

• Dinámica de la literatura (historia, crecimiento, obsolescencia, dispersión, relación ciencia-tecnología, etc.).

1. El proceso que se utiliza para generar un nuevo documento a través de las influencias teóricas contenidas en los documentos que consultan los investigadores;

2. El grado de actividad de los autores mediante el conteo de los artículos generados;

3. El grado de interacción entre los científicos nacionales y extranjeros en la realización de proyectos conjuntos que culminan en un artículo;

4. El panorama global de la influencia que tienen los artículos científicos dentro de la producción mundial;

5. Los campos de conocimiento de mayor actividad, con lo cual se facilita la comparación entre las características de los sistemas de investigación de diferentes países;

6. El desempeño del aparato científico nacional, la calidad y el impacto del conocimiento producido, debido a que un artículo es resultado del proyecto de una investigación que involucra a varios elementos del sistema científico, como la formación de recursos humanos, las redes de trabajo, el apoyo a los investigadores y la colaboración entre las instituciones, entre otros.

Niveles de Análisis

Indicadores bibliométricos

• Producción (Bradford)

• Autoría (Lotka)

• Palabras (Zipf)

• Obsolescencia

• Vida media

• Colaboración

• Factor de impacto

• Sensibilidad

• Impacto

• Citas

• Índice H

Preguntas bibliométricas

• Las características de la productividad de los autores, medida por la cantidad de documentos publicados en un tiempo determinado o por su grado de colaboración.

• Las características de las fuentes donde se publican los documentos, incluida su distribución por disciplinas.

• Los análisis de citas, según distribución por autores, tipo de documento, instituciones o países.

• El uso de la información registrada a partir de su demanda y circulación.

• La obsolescencia de la literatura mediante la medición de su uso y de la frecuencia con que se cita.

• El incremento de la literatura por temas.

• La distribución idiomática según la disciplina o el área estudiada.

industria

administración

disciplinas afines

leídos y certificados (1)críticas y sugerencias

de los colegas

artículos publicados (100)

argumentaciones

interpretaciones

notas de

labora torio

Lectura

de los artículos

escritos por

los colegas

Coloquios, seminarios

grupos de trabajo

leídos y aceptados (9)

Ignorados (90)

investigadores

equipos

proyectos

temas de trabajo

solicitudes

de subvención

financiera

contratación

de personal

compras

producción de

conocimientos

científicos

Consideraciones para un análisis

bibliométrico• Evaluar si los datos disponibles permiten resolver la interrogante.

• Seleccionar la(s) colección(es) idónea(s).

• Establecer los límites , términos y operadores correctos para la consulta.

• Decidir entre la cuenta total o fraccionada.

• Juzgar si los datos requieren de edición para eliminar "artefactos“ (normalizar).

• Comparar semejantes.

• Utilizar medidas relativas, no sólo cuentas absolutas.

• Obtener múltiples medidas.

• Reconocer la naturaleza sesgada de los datos.

• Confirmar que los datos obtenidos sean relevantesa la pregunta.

• Revisar si los resultados son razonables.

• Contextualizar e integrar los datos.

Y, sobre todo, presentar los resultados de forma abierta y honesta.Modificado de PenDlebury, D. A. (2009). White paper: using bibliometrics in evaluating research. Thompson

Reuters.

URL http://isiwebofknowledge.com/media/pdf/UsingBibliometricsinEval_WP.pdf

Édogeno

Scielo

Periódica

Éxógeno

SCI

Scopus

México

• De uso generalizado

• Internet

• Aplicaciones novedosas

• Datos actualizados

• Dinámicos

• Aplicaciones relevantes

• Evaluación, gestión y política científica

• Análisis de la ciencia actual: desarrollo, estructura,

dinámica y relaciones.

• Recuperación de literatura (búsqueda y selección).

Indicadores bibliométricos en el

siglo XXI

Bases de Datos

1970 Agrícola

1970 AGRIS Internacional

1982Algology mycology and protozoology abstracts

1960 Aqualine

1982 Bacteriology abstracs

1994 Biobase

1995 BioBussiness

1981 Biocommerce data´s

1991 BioEngineering Abstracts

1926 Biological Abstracts

1989 Biological Digest

1915 BioOne

1926 Biosis

1969 Biosis toxicology

1967 Bireme

1910 CAB

1800 Chemical Abtracts

2002 Directory of Open Access Journals

1975 Enviroline

1940 Environment complete

1967 Environmental Sciences

1984 General Science Abstracts

2007 Google Scholar (académico)

1982

Industrial and Applied Microbiology

Abstracts

1970 IPA Toxicology

1982 Life Sciences Abstracts

1981 Oceanic Abstracts

1978 Periódica

1981 Pollution Abstracts

1950 PubMed

2002 REDALyC

1975 Scielo

1900 Science Citation Index

1990 SciSearch

1869 Scopus

1967 Water Resources Abstracts

1935 Wildlife & ecology studies worldwide

1983 Wilson Biological & Agricultural Index

1864 Zoological Record Online

1910 1920 1930 1940 1950 1960 1970 1980 1990 2000 2010

Cobertura temporal

Áreas de crecimiento

Figure 1. A mind map [207] summarizing the contents of this article in a convenient manner.doi:10.1371/journal.pcbi.1000204.g001

(Hull, D. et al., 2008)

Anticipated impact of the Data Publishing Framework implementation on scholarly publishing and primary scientific

data publishing cycles.

Chavan and Ingwersen BMC Bioinformatics 2009 10(Suppl 14):S2 doi:10.1186/1471-2105-10-S14-S2

Navegar

BuscarRecomendación

Selección Recuperación

Lectura

Comentar

CitarReferencias

PUBLICACIÓN

Guardar

Obtener

metadatos

1

7

3

45

6

2

Meta-análisisBibliometría

Análisis de redes

Descubrimiento Basado en Literatura

Comentar

PDFs

Acrobat

PDF Exchange*

COLECCIONES DE

DATOS

Bases de datos

Sistemas de

información

Proveedores

Citar mientras

escribo

1/100

Marcadores

Google marcadores y

block

Facebook

Folkosomias

Delicious

Citeulike

Gestores de

bibliografíaGestores de

bibliografía

Endnote

Refworks

Mendeley*

Zotero

Citeulike*

PDF

HTLM

TXT

Alertas

Correos electrónicos

Listas de discusión

Agregadores

Navegadores

Google, Bing

Ciberinfraestructura

Modificado de Hull, 2009

Recursos Web 2.0

Marcadores personales y

sociales:

ShareaholicDelicious

StumbleUponVisualizeusCiteulikeMendeley

Barras de herramientas:

PubMed ToolbarGoogle Toolbar

Complementos:

Motores de búsqueda

Redes socialesColorfulTabs

i-citeInterclue

PubMed-ExScreengrab

Search PreviewSurf Canyon

Fig. 2. Co-word space of the top 50 highly frequent and bursty words used in the top

10% most highly cited PNAS publications in 1982-2001.

Bibliometría

para

palabras

Bibliometría para

obtención de nuevo

conocimiento

Bibliometría para

artículos

Bibliometría para consultas

Búsqueda

Tendencias

Google trends

Bibliometría para búsquedas

Bibliometría para dominios

1

10

100

1000

10000

100000

1864

1870

1876

1882

1888

1894

1900

1906

1912

1918

1924

1930

1936

1942

1948

1954

1960

1966

1972

1978

1984

1990

1996

2002

log

Do

cu

men

tos

SCI Periodica

SCI Biosis

CAB Scopus

ZR

Bibliometría para colecciones

Taxonomía AL

0

10

20

30

40

50

60

70

80

90

100

Bio

l Evolu

t

Zoolo

ogía

Eco

l y cien

c amb

Cien

c bio

log

Anat y

morf

Botàn

ica

Paleo

nto

logía

Bio

l mar y

acuát

Bio

div

y co

nserv

Gen

ética y h

erencia

Parasito

logía

Bio

l repro

d

Fisio

logía

Enfer in

fecc

Forestal

Agricu

ltura

Boquím

y b

iol m

ol

%Biosis

ZR

CAB

SCI

Periódica

Taxonomía América Latina

Taxonomía AL

Bibliometría para colecciones

Bibliometría para países/regiones

Bibliometría para el

conocimiento

Bibliometría para el conocimiento

0

500

1000

1500

2000

2500

3000

19

00

19

05

19

10

19

15

19

20

19

25

19

30

19

35

19

40

19

45

19

50

19

55

19

60

19

65

19

70

19

75

19

80

19

85

19

90

19

95

20

00

20

05

Escherichia (94873)

Drosophila (48989)

Saccharomyces (27549)

Arabidopsis (18094)

Zea (7636)

Neurospora (6640)

Dictyostelium (6191)

Chlamydomonas (5646)

Caenorhabditis (5353)

Schizosaccharomyces (3183)

Danio (973)

Año

Docu

men

tos

0

100

200

300

400

19

40

19

45

19

50

19

55

19

60

19

65

19

70

19

75

19

80

19

85

19

90

19

95

20

00

20

05

Neurospora (6640)

Dictyostelium (6191)

Chlamydomonas (5646)

Caenorhabditis (5353)

Schizosaccharomyces (3183)

Danio (973)

Año

Docu

men

tos

Modelos en Biomedicina SCI

Bibliometría y web semántica

Retos para México

• Colecciones regionales y locales de vanguardia

(sistemas de información y repositorios).

• Revistas electrónicas innovadoras y dinámicas.

• Incorporar herramientas de la Web 2 y 3.

• Agregar opciones de Meta-análisis de literatura

• Bibliometría, análisis de redes, minería de textos y

semántica.

• Personalizadas

• Automáticas

• Suceptibles al meta-análisis

http://laylamichanunam.blogspot.com/

Licencia Creative

Commons

http://creativecommons.org/licenses/by/3.0/deed.es_GT

Michán, L. 2011. Presentación

“Significado y relevancia de los

indicadores bibliométricos”. Mesa

redonda BIBLAT, ECUM Y

SCIELO: INDICADORES

BIBLIOMÉTRICOS Y

CIENCIOMÉTRICOS DE LAS

REVISTAS ACADÉMICAS

MEXICANAS.

XXXII Feria Internacional

del Libro del Palacio de Minería

4 de marzo, 2011 12:00 hrs

AUDITORIO BERNARDO

QUINTANA

Forma de citar este trabajo

Esta investigación se lleva a cabo

gracias al financiamiento de:

DGAPA, UNAM. Proyecto PAPIME PE

201509

CONACYT, Ciencia Básica. Proyecto

13276 2011-2014.