Isi_scopus

Indicadores bibliométricos

y

Bases de datos bibliométricas

• Tres axiomas que obligan a escribir:• “Publicar es consustancial a investigar”• “Lo que no se publica y se difunde no es• ciencia” (todo tiene que poder ser

contrastado)• “Lo que no se documenta acaba no

existiendo”

Baiget, Tomás. “Cómo publicar con impacto en revistas científicas”, seminario impartido el 24 octubre 2011, DGB‐UNAM

Tomado de Baiget, Tomás. “Cómo publicar con impacto en revistas científicas”, seminario impartido el 24 octubre 2011, DGB‐UNAM


ULRICHULRICH’’S: directorio mundial de publicaciones seriadasS: directorio mundial de publicaciones seriadas









http://en.wikipedia.org/wiki/Comparison_of_reference_management_software

Comparativo de Gestores bibliogrComparativo de Gestores bibliográáficosficos


CienciaCiencia

• Evaluación

• Arbitraje = Revisión por pares

• Indicadores bibliométricos

Indicadores bibliomIndicadores biblioméétricos tricos • Son datos estadísticos deducidos de las publicaciones científicas

• Su uso se apoya en el importante papel que desempeñan las publicaciones en la difusión de los nuevos conocimientos

• Estos indicadores son válidos en aquellos contextos en que los resultados de investigación dan lugar a publicaciones científicas

• Habitual en las ciencias básicas

• Para valorar las investigación de las áreas aplicadas es importante recurrir también a las patentespatentes

• La aplicación de los resultados de la investigación a la innovación industrial y su posible comercialización requiere el análisis de patentes y la utilización de otros indicadores relacionados con el mercado

Indicadores bibliomIndicadores biblioméétricos tricos • Indicador bibliométrico: es una medida que se refiere al impacto científico o a la

cantidad de publicaciones científicas [Vinkler 1988]

• Los indicadores bibliométricos pueden dividirse en 2 grandes bloques

– Indicadores relacionados con la publicación– Indicadores relacionados con las citas

• Indicadores relacionados con la publicación: número de artículos, libros, comunicaciones a congresos, informes, patentes, etc.

• Indicadores relacionados con las citas: utilizan como base el número de citas recibidas por las publicaciones que se evalúan

• El más simple de estos indicadores es el número de citas recibidas por una publicación, un autor, un departamento, etc.

• Uno de los indicadores más utilizados es el factor de impactofactor de impacto

Vinkler, P. 1988. An attempt of surveying and classifying bibliometric indicators for scientometric purposes. Scientometrics, 13, 239‐259

Revistacitante

RevistaRevistacitadacitada















1 año

2 y 3 años

Vida media: años en los que se acumulan el 50% de las citas que recibe una revista


Factor de impacto Factor de impacto • Indicador inventado en los años 60’s por Eugene Garfield,

presidente del Institute for Scientific InformationInstitute for Scientific Information

• Variables que influyen en los valores numéricos de los factores de impacto:

• Número de citas que contienen los artículos que se publican en un área determinada– Los artículos de revisión tienden a ser más citados que los artículos

usuales

• No es raro que algunas de las revistas que publican revisiones figuren entre las de más alto impacto

Secuencia temporal en la distribuciSecuencia temporal en la distribucióón de las citasn de las citas• La distribución de las citas que los artículos reciben con el tiempo parece seguir una pauta

común

• Diversos autores han propuesto ecuaciones matemáticas que modelan la variación del número de citas anuales que reciben los artículos

• Según estos modelos, el número de citas que recibe un artículo comienza siendo pequeño y crece progresivamente con el tiempo hasta que alcanza un máximo a partir del cual el número de citas anuales que consigue decrece progresivamente con un ritmo de descenso generalmente distinto del ritmo de crecimiento

• Existen diferencias entre disciplinas en la edad a la que los artículos alcanzan el máximo de citas

• Los artículos de Ciencias Naturales suelen alcanzar su máximo de citas antes que los artículos de Ciencias Sociales y Humanidades

• En Ciencias Naturales los artículos suelen contener referencias a artículos recientes

• En Ciencias Sociales las referencias se suelen hacer a publicaciones de más edad

• Journal Citation Report (ISI) incluye el parámetro de vida media

• Vida media = refleja la obsolescencia de los artículos que se publican en las revistas científicas

• Una vida media = 55 significa que la mitad de las citas que recibe una revista en un año fueron para artículos publicados en los 5 años anteriores

Factor de impacto [ FI ]Factor de impacto [ FI ]• El factor de impacto es utilizado por las bibliotecas cientbibliotecas cientííficasficas para seleccionar o

cancelar las suscripciones ‐‐‐‐ precios de subscripción / presupuesto

• Las editorialeseditoriales pueden utilizar los factores de impacto para conocer la posición de sus revistas científicas con respecto a la competencia

• También para decidir el lanzamiento de una nueva revista en áreas no suficientemente cubiertas bibliográficamente

• Los cientcientííficos ficos orientan su decisión para publicar teniendo en cuenta los FI– Tanto para conseguir una mayor difusidifusióónn de sus trabajos– Como para incrementar su prestigio prestigio y visibilidadvisibilidad en la comunidad científica

• FI para la EVALUACIEVALUACIÓÓN ACADN ACADÉÉMICAMICA: la idea que subyace tras este enfoque es que el FI refleja el prestigio y la influencia de una revista científica entre la comunidad científica

• Se considera que se puede diferenciar el mmééritorito de los artículos científicos atendiendo a la revista en la que se publicaron

CrCrííticas vs Factor de impacto [ FI ]ticas vs Factor de impacto [ FI ]• Críticas vs consistencia o validez del FI

•• GarfieldGarfield: aconseja utilizar el FI con las debidas precauciones en situaciones de evaluación académica o para la promoción profesional

•• AsimetrAsimetríía a en la distribución de las citas que reciben los artículos

• La mayoría de los artículos publicados en una revista científica no alcanzan el impacto medio de dicha revista

• Unos cuantos artículos tienden a superar ampliamente dicho factor de impacto

• El FI tiende a eliminar las diferencias entre el número de citas que reciben los artículos

• Seglen: – los artículos más citados suelen ser publicados en revistas con un FI elevado– Pero no todos los artículos publicados en revistas con un alto FI son altamente citados

• Aunque los artículos más citados son únicamente una pequeña fracción de los que se publican en una revistas, contribuyen abrumadoramente al FI

¿¿Citas = Calidad?Citas = Calidad?• Debate: muchos artículos no son citados• Gran parte del trabajo científico realizado no tiene relevancia

• La presión por publicar convierte la literatura científica en un “océano de artículos no leído e ilegibles” [Broad y Wade 1982]

• Eugene Garfield: el hecho de que un artículo sea poco citado no es necesariamente negativo

• Los científicos leen muchos más artículos que los que citan

• No puede afirmarse que los artículos no citados resulten inútiles

• Otros trabajos son utilizados en la enseñanza

Broad, W.; Wade, N. 1982. Betrayers of the Truth: Fraud and Deceit in the Halls of Science, Simon and Schuster: Nueva York

Diferencias en la citaciDiferencias en la citacióónn• La citas recibidas reflejan la utilidad de un artículo para la

comunidad científica• [Una citación negativa mayoritaria no es frecuente]• Existen otros factores: • Tamaño del área del conocimiento:

– En un área limitada como Matemáticas es menos probable que un artículo sea citado que en el caso de la Bioquímica

• Número medio de referencias varía por disciplinas: los artículos de Bioquímica contienen más referencias por término medio que los artículos de Matemáticas

• El período de latencia varía de una disciplina a otra: en ciertas áreas de la Física hay un cierto lapso entre la aparición de un artículo y el comienzo de las citas al mismo, debido a que se necesita cierto tiempo para realizar los experimentos necesarios para comprobar resultados

Diferencias en la citaciDiferencias en la citacióónn• Los documentos citados varían por disciplina: existen diferencias en el uso de libros y de los artículos en revistas como medio de comunicacimedio de comunicacióón cientn cientííficafica

• Las referencias a libros es mayor en áreas de Humanidades y en Ciencias Sociales que en Ciencias Naturales

• La disponibilidad y difusión de las revistas científicas es otro factor que influye en el número de citas que reciben los artículos

• Sesgo del idioma: las revistas que se publican en inglés están más representadas en los índices de citas y sus artículos son, en general, más citados que los publicados en otros idiomas

Descubrimiento prematuro / reconocimiento tardDescubrimiento prematuro / reconocimiento tardííoo• Hay casos excepcionales en relación al patrón de citación en el

tiempo

• Casos de descubrimiento prematuro que conducen a un reconocimiento tardío

• Descubrimientos rechazados o no debidamente apreciados en su momento, sino posteriormente

• Stephen Cole llamó a este fenómeno Reconocimiento tardReconocimiento tardííoo

• Ej.: Teoría de Polanyi de la adsorción de gases por sólidos propuesta en 1914 encontró un rechazo unánime

• Fue olvidada y redescubierta en la década de los 50’s [Stent 1972]

Stent, G.S. 1972. Prematurity and uniqueness in scientific discovery. Scientific American, 227, 84‐93

DetecciDeteccióón del reconocimiento tardn del reconocimiento tardííoo

• Una herramienta poderosa utilizada para detectar casos de reconocimiento tardío son los ííndices de ndices de citascitas

• Un artículo típico que sufre reconocimiento tardío recibe muy pocas citas o incluso permanece sin ser citado durante los años inmediatamente siguientes a su publicación

• Un posterior incremento rápido y notable de las citas que recibe es señal de que ha sido “descubierto” por la comunidad científica

Stent, G.S. 1972. Prematurity and uniqueness in scientific discovery. Scientific American, 227, 84‐93

(PARÉNTESIS CRÍTICO)

(PARÉNTESIS CRÍTICO)

http://www.guardian.co.uk/science/2011/sep/05/publish‐perish‐peer‐review‐science


La revista seleccionada es citada por las revistas de la lista

La revista seleccionada cita a las revistas de la lista

Información del autor

Indice HIndice H

Indice HIndice H

El índice H

Medida de posición en la cual el volumen de citas es menor o igual al número de orden que ocupa el artículo en una distribución descendente de citas

Artículo No. Citas

1 62 53 44 45 26 17 18 19 010 0

El índice h de Hirsch: aportaciones a un debate. Grupo Scimagohttp://www.scimago.es/publications/epi1542006b.pdf

El índice H

“El índice h tiende a valorar un esfuerzo científico prolongado a lo largo de toda la vida académica, frente a verdaderos ‘pelotazos’ puntuales que pueden tener un impacto muy alto pero acotado”

Artículo No. Autor 1 Autor 2

1 21 1332 17 153 15 94 15 45 15 46 13 37 11 38 10 39 9 210 8 111 7 112 5 113 5 114 4 115 4 116 4 117 3 118 3 119 3 120 2 121 2 122 2 123 2 024 1 025 1 026 1 027 1 028 1 029 1 030 1 031 1 032 1 033 0 034 0 035 0 036 0 037 0 038 0 039 0 040 0 0

Total 189 189Media 4.73 4.73 El índice h de Hirish: aportaciones a un debate. Grupo Scimago

http://www.scimago.es/publications/epi1542006b.pdf


Información afiliación



http://www.scimagojr.com

Scimago Journal Rank (SJR)Scimago Journal Rank (SJR)elaborado por el grupo a partir del algoritmo elaborado por el grupo a partir del algoritmo PageRankPageRank

•• PageRankPageRank es una familia de algoritmo creada por Google (1999) utilizada para asignar de forma numérica la relevancia de los documentos

•• PageRankPageRank se basa en la vasta estructura de enlaces como indicador del valor de una página en concreto.

• Google interpreta un enlace de una página A a una página B como un voto, de la página A, para la página B.

• Además Google va más allá del volumen de votos, o enlaces que una página recibe: también analiza la página que emite el voto. Los votos emitidos por las páginas consideradas "importantes", es decir con un PageRank elevado, valen más, y ayudan a hacer a otras páginas "importantes”

• Por lo tanto, el PageRankPageRank de una página refleja la importancia de la misma en Internet

http://www.scimagoir.com

http://www.scimagolab.com/blog/wp-content/uploads/2011/05/wo1.png

Mapa de la Ciencia Mundial:Mapa de la Ciencia Mundial:• Aumento de la participación de instituciones de países en desarrollo• Pero las instituciones con producción cientítfca de “excelencia”, esto es, que representa un avance verdadero y significativo para la ciencia, no ha cambiado mucho: ‐ Hay una gran concentración en instituciones de Norteamérica, Europa, India, China y Japón

‐ En menor medida, en el hemisferio sur: en Chile, Argentina y más pronunciadamente en Brasil, Sudáfrica y Australia

CHINA: nuevo integrante de la élite de países más productivos científicamente

http://www.scimagolab.comImpacto NormalizadoImpacto Normalizado• SIR World Report 2010 utiliza 4 indicadores para evaluar el desempeño de las instituciones de investigación

• Están basados en la producción científica y las citas que recibe esta producción

OutputOutput [producción]• Número de artículos (papers) publicados en revistas académicas• Revela la capacidad de una institución para producir conocimiento científico• Producción en co‐autoría es atribuida a cada una de las institución de acuerdo con la afiliación institucional del autor

International International Collaboration IC (%) Collaboration IC (%) • Indicador que muestra la capacidad de las instituciones para crear vínculos internacionales de investigación mediante una proporción de las producción generada en colaboración con instituciones extranjeras

Normalized Impact INNormalized Impact IN• Mide impacto científico que tiene una institución en la comunidad científica• Con objeto de tener una medición justa, el cálculo de este indicador elimina la influencia del tamaño de institución y el perfil de investigación • IN muestra la proporción entre el impacto científico promedio de una institución y el impacto promedio mundial de las publicaciones del mismo tipo de documento y área temática• Los valores son expresados en %• % que muestran la posición de la institución en relación al promedio mundial = 1• NI = 0.8, la institución es citada 20% < del promedio mundial• NI = 1.3, la institución es citada 30% > promedio mundial

High Quality Publications Q1 (%)High Quality Publications Q1 (%)Proporción de las publicaciones de institución publicadas en las revistas académicas más influyentes a nivel mundial

Las revistas consideradas por este indicadore son aquellas incluidas en el primer cuartil (25%) en sus respectivas áreas temáticas, según el indicador SCImago Journal Rank (SJR)

Dependencia cientDependencia cientíífica de pafica de paííses en desarrolloses en desarrollo

• ¿Cuándo la colaboración con investigadores de regiones altamente productivas representa una situación de dependencia cientdependencia cientííficafica?

• Algunas instituciones de investigación muestran tasas extremadamente altas de Colaboración Internacional (IC), lo cual puede estar asociado a situación de dependencia científica

• Dependencia científica: cuando la colaboración internacional de una institución alcanza o excede el 80% de su producción total, lo que quiere decir que su producción exclusiva es marginal

• Además, cuando una institución muestra altas tasas de IC junto con un impacto (IN) sobresaliente dentro de su propio país o región, el cual se debe con más probabilidad a la colaboración = se puede concluir que existe una dependencia científica externa

ALAL: algunos países de bajo desarrollo científico, reflejan altas tasas de IC + relativamente alto NI

http://www.scimagolab.com/blog/2011/scientific-excellence-georeferenced-the-neighborhood-matters

• El SIR World Report 2011 incluye 3,0423,042 institucionesinstituciones de investigación (vs 2,833 del Reporte 2010) de 104 pa104 paíísesses (20 instituciones más que la edición anterior)

• Se consideran las instituciones que publican más de 100 documentos por a100 documentos por añño o (indizados en Scopus)

• Ha mejorado el proceso de identificación y desambigüación

• El Ranking aún es dominado por EUAEUA, con 498 instituciones498 instituciones (13 más que en 2010)

• Sin embargo, los incrementos más grandes han sido de parte de países emergentes

• ChinaChina, que tiene el segundo lugar en el ranking, acortó la distancia gracias a la inclusión de 285 instituciones 285 instituciones (38 más que en 2010)

• Brasil Brasil se colocó en el lugar 10 con 92 instituciones 92 instituciones en el ranking (19 más que en 2010)

WRWR World Ranking

RRRR Regional Ranking

CRCR Country Ranking

GOGO Government HEHE Higher Education HLHL Health PRPR Private OTOT Others

AFAF Africa

ASAS Asia

EEEE Eastern Europe

LALA Latin America

MEMEMiddle

East NA NA Northern

America

OCOC Oceania

WEWEWesternEurope

SI: Specialization SI: Specialization IndexIndex

Indica la extensión de la concentración / dispersión temática de la producción científica de una instituciónValores de 0 a 1 indica generalidad vs especialidad respectivamente

ER: Excellence ER: Excellence RateRate

Indica el porcentaje de la producción científica de una institución incluido en el grupo formado por el 10% de artículos más citados en sus respectivas áreas temáticas

http

://w

ww

.sci

mag

oir.c

om/p

df/s

ir_20

11_w

orld

_rep

ort_

latin

_am

eric

a.pd

f

Latin American Supplement

http://www.ecum.unam.mx

CLASE y PERIÓDICA: Indicadores bibliométricos

http://biblat.unam.mx

RICYT - RED DE INDICADORES DE CIENCIA Y TECNOLOGÍA -IBEROAMERICANA E INTERAMERICANA

EXECUM – Explorador de ECUM

http://www.ricyt.org

http://www.ecum.unam.mx

ECUM - Estudio Comparativo de las Universidades Mexicanas

BIBLAT: indicadores bibliométricos CLASE y PERIÓDICA

Perfil de la producción nacional

eigenFACTOR eigenFACTOR http://www.eigenfactor.orghttp://www.eigenfactor.org

• EigenfactorEigenfactor es una fuente de datos métricos sobre las revistas científicas internacionales basada en información de citas de Journal Citation Reports y en la aplicación de algoritmos de relevancia tipo PageRank de Google

• Además ofrece análisis de calidad/precio de las revistas y un módulo de representación gráfica de las relaciones entre las ciencias (mapping…)

• SJRSJR, utilizado en SCImago Journal & Country Rank, es otro indicador del tipo PageRank, también sobre revistas, pero basado en los datos de ScopusScopus en lugar de en los de Journal Citation Reports y Web of Science.

CocitaciCocitacióónn






• Un Frente de InvestigaciFrente de Investigacióón n es un grupo de artículos altamente citados, referidos como “artículos núcleo” / “core papers” en un área definida por un análisis cluster

• Los clusters están formados por mediante la selección de todos los artículos que pueden estar vinculados por la co‐citación

• El ISI identifica unos 8,000 frentes de investigación cada año

Pais Revistas JCR 2007

Revistas JCR 2008

Revistas JCR 2009

Revistas JCR 2010

Argentina 9 10 13 16Brasil 30 31 71 103Chile 10 11 23 31Colombia 2 2 9 19Costa Rica 1 1 1 1Cuba 1 1 1 0España 43 53 91 121México 17 18 33 41Portugal 3 3 4 7South Africa 25 29 45 53Venezuela 3 3 9 10Uruguay 1 1 1 1

Total 145 163 301 403

Thomson Reuters, 2010, Revistas indexadas en el JCR

Packer, Abel L. Presentación “SciELO en perspectiva”, Reunión virtual de la red SciELO, 23 agosto 2011

70 revistas revistas mexicanas en Scopus, cuyos indicadores son accesibles a través de SCImago

En Scopus hay más revistas mexicanas que en Web of Science de ISI

(ver portal SCImago, el cual extrae su información de Scopus)

http://www.scimagojr.com/journalrank.php

Fonte: Folder of International Seminar on Open Acces for Developing Countries, by BIREME

●● Iniciativa Iniciativa open accessopen access pionera en Ampionera en Améérica Latina y rica Latina y el Mundo el Mundo

●● Open Archive Iniciative (OAI)Open Archive Iniciative (OAI)

Oralia Carrillo RomeroOralia Carrillo [email protected]@dgb.unam.mx

Antonio SAntonio Sáánchez Pereyranchez [email protected]@[email protected]@dgb.unam.mx

DirecciDireccióón General de Bibliotecas n General de Bibliotecas –– UNAMUNAM