Indicadores bibliométricos

Nociones básicas y aplicaciones prácticas

Nicolás Robinson-García

Carlos Benito Amat

Collaborative Learning Workshop 25 de febrero, 2016

Objetivos

o Conocer qué es la bibliometría y cuáles son sus fundamentos teóricos

o Adoptar una visión crítica sobre los indicadores bibliométricos y sus limitaciones

o Iniciarse en el tratamiento de datos bibliométricos

Nociones básicas de bibliometría

Nociones básicas [Bibliometrics]

The application of mathematics and statistical methods to books and other media of communication

Pritchard, 1969

[Scientometrics] The quantitative methods of the research on the development of

science as an informational process Nalimov & Mulchenko, 1971

[Informetrics] The study of the application of mathematical methods to the objects of information science for the description and analysis of its phenomena,

the discovery of its laws and the support of its decisions Nacke, 1979

Nociones básicas La bibliometría básica comprende los estudios de tipo dinámico y es un

dominio de investigación básica que incluye las investigaciones de tipo

metodológico (desarrollo de nuevos indicadores, por ejemplo).

La bibliometría aplicada la practican investigadores procedentes de diversas

disciplinas y su interés está fuertemente ligado con sus respectivas

especialidades.

La bibliometría de evaluación se realiza en el marco de la política científica se

inscribe en el dominio de la evaluación de la investigación, el tema más

crucial en la actualidad. Sus análisis se dirigen a las estructuras científicas

nacionales, regionales e institucionales y a su tratamiento comparativo.

La bibliometría estructural trata sobre todo del problema de cartografiar la

estructura cognitiva del conocimiento, basándose en el análisis de las

relaciones de citas y de la estadística lexicográfica

Glänzel, W: Bibliometrics as a research field. Leuven, Centre of Steunpunt O&O Indicatoren.

Katholieke Universiteit Leuven, 2003.

Los culpables

IMPLICACIONES SCIENCE CITATION INDEX FUNDAMENTOS PRÁCTICAS TEÓRICOS

La premisa o El prestigio del investigador se mide a través

de su obra

o El principal medio de transmisión de la actividad investigadora es el artículo científico

o La cita refleja la influencia de la obra de un investigador

Leyes bibliométricas o Lotka

Un número reducido de autores produce la mayor parte del conocimiento científico

o Bradford

Un número reducido de revistas contiene el ‘core’ del conocimiento científico de una disciplina

o Price

El conocimiento científico crece de manera exponencial

Cuestiones básicas o El peer review es esencial para la evaluación

o Las citas deben venir de trabajos sometidos a peer review

o Las citas son un proxy de impacto científico

o Hay sesgos en la citación

Cuestiones básicas

Seglen, P. The Skewness of science. Journal of the American Society for Information Science and Technology. V. 43, N. 9, pp. 628–638, 1992

Amateur bibliometrics

[…] it is much easier to make a measurement than to ascertain just what has been measured, and considerable caution must therefore be exercised in any interpretations of the statistics of publication.

Price, 1951

Indicadores bibliométricos

¿Qué queremos medir? Impacto

científico

Visibilidad

Liderazgo

Capital social

Productividad

Transferencia

Tipos de indicadores

Producción Impacto

Colaboración Otros

indicadores

Naturaleza

• Publicaciones

• Citas

• Métricas alternativas

Tipo de medida

• Actividad

• Impacto

• Colaboración

Unidad de análisis

• Nivel micro

• Nivel meso

• Nivel macro

Producción

Producción Impacto

Colaboración Otros

indicadores

o Número de documentos citables

o Tasa de crecimiento relativo

o Índice de Actividad Temática

o Índice de Especialización

o …

Impacto

Producción Impacto

Colaboración Otros

indicadores

Indicadores de visibilidad

o Porcentaje de trabajos en el Primer Cuartil

o Porcentaje de trabajos en el primer decil

o …

Indicadores de impacto

o Promedio de citas por artículo

o Tasa de autocitación

o Impacto normalizado

o …

Colaboración

Producción Impacto

Colaboración Otros

indicadores

o Tasa de colaboración

o Tasa de colaboración internacional

o Índice de coautoría institucional

o Análisis de redes a través de la coautoría

o …

Otros indicadores

Producción Impacto

Colaboración Otros

indicadores

o Número de descargas que recibe un trabajo

o Lectores en Mendeley y tipos de lectores

o Atención mediática en Twitter

o Indicadores de co-citas y co-referencias

o …

Niveles de agregación

Macro >> Países, áreas científicas

• Mayor fiabilidad

Meso >> Instituciones, disciplinas

• Fiabilidad moderada

Micro >> Grupos, investigadores

• Fiabilidad relativa

Bases de datos y cobertura temática

CIENCIAS BIOMÉDICAS

CIENCIAS NATURALES Y EXACTAS

INGENIERÍAS Y COMPUTACIÓN

CIENCIAS SOCIALES

HUMANIDADES

Bases de datos y fiabilidad

The Google Scholar Experiment

Recogida de datos

Top down Bottom up

Otras consideraciones

o Rango académico / Edad científica

o Disciplina científica

o Grandes productores vs. One hit wonders

o Posición de firma

Algunos ejemplos

H-Index Un autor tiene un índice

h cuando h de sus trabajos han recibido al

menos h citas

Algunos ejemplos

Factor de Impacto

El Factor de impacto de una revista no es representativo del impacto de los artículos

publicados en dicha revista

Número de citas recibidas en el año X por los trabajos publicados en X-1 y X-2

Número de trabajos publicados en X-1 y X-2

Algunos ejemplos

http://www.slideshare.net/NeesJanvanEck/issi2013

Normalización de citas

Algunos ejemplos

Torres-Salinas, Robinson-García & Aguillo, 2016

Normalización de citas

Aplicaciones prácticas

Prácticas en Web of Science

1. Campos de búsqueda

2. Informes de citas

3. Análisis de resultados

4. Descarga de datos

5. Campos bibliográficos

Prácticas en Web of Science

1. Calcula el nº de documentos citables de INGENIO para el periodo 2010-2015

2. Analiza el perfil temático de INGENIO según las categorías de la Web of Science

3. Identifica las tres revistas donde más ha publicado y su Factor de Impacto para el año 2014

4. Descarga su producción y emplea tablas dinámicas para analizar los datos

o H. Moed. Citation Analysis in Research Evaluation. Springer, 2005

o P. Vinkler. The Evaluation of Research By Scientometric Indicators. Chandos Publishing, 2010

o N. de Bellis. Bibliometrics and Citation Analysis: From the Science Citation Index to Cybermetrics. Scarecrow Press, 2009

o B. Cronin & C. Sugimoto (eds.). Beyond Bibliometrics: Harnessing Multidimensional Indicators of Scholarly Impact. The MIT Press, 2014

Lecturas recomendadas

Formación

Indicadores bibliométricos

Nociones básicas y aplicaciones prácticas

Nicolás Robinson-García

Carlos Benito Amat

Collaborative Learning Workshop 25 de febrero, 2016