170
Métricas alternativas e impacto social de la investigación Julio Alonso Arévalo Grupo E-LECTRA Universidad de Salamanca [email protected] Junio 2016

Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Embed Size (px)

Citation preview

Page 1: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Métricas alternativas e impacto social de la

investigación

Julio Alonso Arévalo

Grupo E-LECTRA

Universidad de Salamanca

[email protected]

Junio 2016

Page 2: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Esquema• Introducción. Tendencias científicas• ¿Cómo se ha medido la ciencia los últimos 60 años?• Una ciencia más interconectada: DOIs, URIs y URLs persistentes• ¿Qué es Altmetrics? Ventajas, Inconvenientes• Herramientas altmetrics• ¿Qué sitios están incorporando medidas altmétricas?• Conclusiones

Page 3: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Esquema• Introducción. Tendencias científicas• ¿Cómo se ha medido la ciencia los últimos 60 años?• Una ciencia más interconectada: DOIs, URIs y URLs persistentes• ¿Qué es Altmetrics? Ventajas, Inconvenientes• Herramientas altmetrics• ¿Qué sitios están incorporando medidas altmétricas?• Conclusiones

Page 4: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Un nuevo escenario para la ciencia

Page 5: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Los medios sociales están cambiando la forma de interactuar, presentar las ideas e información y juzgar la calidad de los contenidos y contribuciones. En los últimos años han surgido cientos de

plataformas que permiten compartir libremente todo tipo de información y conectarnos a través de redes. Estas nuevas herramientas generan estadísticas de actividad e interacciones entre sus

usuarios tales como menciones, retweets, conversaciones, comentarios

Page 6: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones
Page 7: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

La mayor parte de los investigadores han trasladado sus actividades de investigación a la web y con el éxito de los medios sociales esta situación se ha hecho más evidente, ya

que estas herramientas tienen más potencialidad para desarrollar un rango mayor de influencia académica que los entornos tradicionales de publicación. 

Page 8: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Van Noorden, R.. (2014). Online collaboration: Scientists and the social network. Nature, 512(7513), 126-129. doi: 10.1038/512126a

El 75% de los investigadores inician su investigación desde Google

Entre un 70 y un 80% de los

investigadores cuando inician una

investigación utilizan Google o Google Scholar

Page 9: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

FLEXIBILIDAD

Page 10: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

APERTURA

Page 11: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones
Page 12: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

INTERCONEXION DE SISTEMAS DATOS VINCULADOS

Julio
Importante avance en la creación de enlaces persistentes e identificadores de objetos digitales (DOIs) que permiten la interconexión de datos específicos que facilita el descubrimiento y la reutilización
Page 13: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Internet de las cosas Crecimiento

exponencial de los datos

Julio
“En lugar de simplemente informar únicamente de datos brutos, las cosas conectadas pronto serán capaces de enviar información de alto nivel y conocimientos a otras máquinas, equipos y personas en tiempo real para su posterior evaluación y toma de decisiones. La red inteligente implicará todo, y será el único lugar donde será posible construir la inteligencia escalable necesaria para conocer y utilizar esta nueva ola de “datos en movimiento ‘. Esta transformación será posible gracias a la aparición de la Internet de las cosas”
Julio
En conclusión la Internet las cosas reúne a personas, procesos, datos y cosas para conectar a todos ellos en red con el objetivo de hacer la red más relevante y valiosa que nunca antes, y de este modo convertir la información en acciones que crean nuevas capacidades, experiencias más ricas y nuevas oportunidades económicas sin precedentes para las empresas, los individuos y los países. Si bien habrá que tener en cuenta algunas consideraciones pendientes de resolver satisfactoriamente como las relativas a la privacidad, la seguridad, el consumo de energía y la congestión de la red.
Page 14: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Big DataBIG DATA

Nuevas oportunidades económicas sin

precedentes para las empresas, los individuos y

los países.

Julio
La Ciencia como una empresa abierta"pone de relieve la necesidad de gestionar la enorme avalancha de datos generados por las tecnologías de la información con el fin de preservar el principio de apertura y explotar los datos de manera que posibiliten el potencial de crear una segunda revolución científica abierta. Explorar grandes cantidades de datos a través de las modernas tecnologías digitales tiene un enorme potencial para la ciencia y su aplicación en las políticas públicas y negocios.
Page 15: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

La adecuada gestión de datos es fundamental para

los datos de investigación de

alta calidad y, por tanto, la

investigación de excelencia

Julio
”Big data” está impulsando a las instituciones académicas a desarrollar y desplegar nuevas iniciativas. El aumento del volumen y organización de la información capturada por las empresas y organizaciones, el aumento de los multimedia, las redes sociales y la “Internet de las cosas” van a impulsar un crecimiento exponencial de los datos en el futuro. Datos de registros de llamadas, transacciones de banca móvil, contenido generado por el usuario de internet, tales como blogs y tweets, búsquedas en línea, imágenes de satélite, etc. es información procesable que requiere el uso de técnicas computacionales para dar a conocer las tendencias y patrones dentro de y entre éstos extremadamente grandes conjuntos de datos socioeconómicos.
Page 16: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Un entorno digital en expansión impulsa cambios en

los criterios para medir el impacto de la investigación y

erudición

Page 17: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Esquema• Introducción. Tendencias científicas• ¿Cómo se ha medido la ciencia los últimos 60 años?• Una ciencia más interconectada: DOIs, URIs y URLs persistentes• ¿Qué es Altmetrics? Ventajas, Inconvenientes• Herramientas altmetrics• ¿Qué sitios están incorporando medidas altmétricas?• Conclusiones

Page 18: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

¿Cómo se ha medido la calidad científica en los

últimos 60 años?

Page 19: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

1961 

Page 20: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Medir la CalidadLas Agencias de Evaluación y entidades financieras necesitan una medida objetiva de la calidad de las publicaciones.

Consecuentemente existe una demanda de medidas de este tipo

Page 21: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Medir la Calidad• Colectiva: Impacto de la revista. En que revistas publicar

- Internacional: ISI JCR, Scopus SJCR, EriH, Latindex.

- Nacional: RESH, DICE, IN-RECS

• Individual: Número de citas: ISI WoK, Scopus, Google Scoolar Citations

Page 22: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

CálculoEl factor de impacto de una revista es la media de veces que en un año determinado fueron citados los artículos publicados por esta revista en los dos años anteriores.

Page 23: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Cálculo

Page 24: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Argumentos a favor

A favor…

Cobertura internacional amplia con más de 12400 publicaciones de 60 países.

Los resultados son publicados y disponibles (FEYCIT)

Es fácil de usar y entender.

Page 25: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Argumentos en contra

En contra…

•El número de las citas no mide realmente la calidad de la publicación, pero sí la cantidad de publicaciones•El periodo de cálculo base para citas es muy corto• La naturaleza de los resultados en distintas áreas de investigación (Ciencias vs. Sociales-Humanidades)•Sesgo Lingüístico-Geográfico revistas principalmente en inglés de países desarrollados

Page 26: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

CARACTRISTICAS DE LAS 15 REVISTAS MÁS CITADAS

Las revistas más citadas en

Web of Knowledge son

del ámbito anglosajón y

de las áreas de ciencias

Page 27: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

¿Cuál de estos dos investigadores consideráis que tiene más impacto?

Page 28: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

El artículo + citado de la historia

El artículo de Oliver H. Lowry, Nira J. Rosenbrough, A. Lewis Farr, Rose J. Randall, “Protein Measurement

with the Folin Phenol Reagent,” The Journal of Biological Chemistry (JBC) 193: 265-275, 1951, está considerado el artículo más citado de toda la historia de la ciencia (según el ISI Web of Science

1945-2010).

293.328 citasOliver H. Lowry

Albert Einstein, ha sido citado a día de hoy 6647 veces

Page 29: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Artículos más citados de la USAL

Ciencias

Sociales

Humanidades

Buscó: Dirección: (UNIV SALAMANCA)

Page 30: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

http://www.shanghairanking.com/es

Ranking de

Shangai

Page 31: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

http://www.shanghairanking.com/es

Ranking Académico de las Universidades del Mundo (ARWU) en 2015 

La mayoría de las universidades son

del ámbito anglosajón

Page 32: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

La Declaración de San Francisco sobre Evaluación de la Investigación (DORA)

Descargar

Una serie de temas recorren estas recomendaciones: 

• la necesidad de eliminar el uso de métricas basadas en revistas, tales como índice de impacto de revistas, en la financiación, en los nombramientos, y en las consideraciones de promoción;

• la necesidad de evaluar la investigación por sus propios méritos y no en base a la revista en la que se publica la investigación, y

• la necesidad de aprovechar las oportunidades que ofrece la publicación en línea exploración de nuevos indicadores de la importancia y el impacto

Page 33: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

The Leiden Manifesto for research metrics 2015Según los autores, la obsesión de las universidades con su posición en los rankings globales (como el de Shanghai o el Times Higher Education, por ejemplo) está amenazando con dañar el sistema científico ya que éstas listas están basadas en datos inexactos e indicadores arbitrarios.

Page 34: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

International Council of Science. (2014). [e-Book] Open access to scientific data and literature and the assessmentof research by metrics, International Council of Science.

Texto completo

“Las nuevas tecnologías digitales y la comunicación ubicua ofrecen oportunidades sin precedentes para la ciencia basada en

procesos abiertos”

Page 35: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Esquema• Introducción. Tendencias científicas• ¿Cómo se ha medido la ciencia los últimos 60 años?• Una ciencia más interconectada: DOIs, URIs y URLs persistentes• ¿Qué es Altmetrics? Ventajas, Inconvenientes• Herramientas altmetrics• ¿Qué sitios están incorporando medidas altmétricas?• Conclusiones

Page 36: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Dos aspectos clave

• Una ciencia más abierta• Una ciencia más interconectada

Page 37: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Interacciones científicas

Page 38: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Interacciones científicasLas nuevas herramientas 2.0 generan estadísticas de actividad e

interacciones entre sus usuarios tales como menciones, retweets, conversaciones, comentarios en Blogs o en Facebook;

gestores de referencias que muestran índices de popularidad de las referencias más compartidas por otros investigadores o repositorios

que generan estadísticas de visitas, o descargas de artículos.

Page 39: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Investigación 2.0

Los investigadores están utilizando cada vez más

herramientas sociales para el descubrimiento, el

análisis y la difusión de la investigación

¿Cuáles son las herramientas 2.0 más usadas por los investigadores?

Page 40: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Las herramientas 2.0 generan estadísticas muy precisas de

sus actividades y de las intreracciones con los usuarios

Page 41: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Productos que generan datos de las interacciones

Datos de visualizaciones, comentarios…… en SLIDESHARE en la

última semana

Page 42: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones
Page 43: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Proporciona índices de popularidad para clasificar los resultados de búsqueda

en función de las referencias más compartidas por otros

investigadores

Mendeley es una herramienta muy sólida de la web social que

utilizan todas herramientas alttmétricas

Page 44: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Procedencia, disciplina, estatus

académico de quienes

compartieron la referencia

Page 45: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Estadística de SCOPUS Science Direct

La nueva versión hace correlaciones

entre citas en Scopus,

visualizaciones en Science Direct y

veces que se compartió esa

investigación en Mendeley

Page 46: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Citas por artículo y

documentos citantes

Correlación entre citas en Scopus y

veces que fue compartida la referencia en Mendeley con

los documentos citantes

Page 47: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Lectores por disciplina y

grupos, estatus

académico

Page 48: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Procedencia geográfica de las citas

Page 49: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Redes sociales científicas

Las redes científicas especializadas también

generan citas de sus interacciones

Page 50: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

RG Score

Visualizaciones, descargas,

seguidores en la última semana

Page 51: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Estadísticas mensuales,

procedencia, qué y cómo lo buscaron

Page 52: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Gráficos estadísticos

Page 53: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

http://www.facebook.com/groups/347127501985354/

Redes sociales genéricas

Incluso las redes genéricas están

sirviendo como un buen mecanismo de

tracción de las actividades de

investigación sobre todo a través de

grupos especializados

Page 54: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Redes sociales genéricas

Twits, retwits, me gusta y comentarios … favorecen la visibilidad social de la

investigación

Page 55: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Todo esto se ha visto favorecido por los avances

hacia una ciencia más interconectada: DOIs, URIs y

URLs persistentes

Page 56: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Identificadores PersistentesLos identificadores persistentes surgen para solucionar el problema de los cambios de ubicación y/o nombre de los archivos en Internet. Su objetivo es redireccionar a los documentos, aunque estos hayan cambiado de ubicación en la red (cambio de URL).

La identificación permanente de los documentos digitales permite garantizar la citación correcta de este tipo de obra.

Facilitan la Interconexión entre sistemas

Page 57: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Enlaces persistentes

Page 58: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

LA IDENTIDAD DIGITAL DEL AUTOR

YREPUTACIÓN EN LINEA

Avance asombros de los si

stemas d

e identificación

de obras y autores, esenciales p

ara la

interconexión de sis

temas favoreciendo la

búsqueda y recuperación

Page 59: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Cultivar la reputación digital

Page 60: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Reputación digital

Page 61: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Mecanismos para cultivar nuestra reputación digital

Page 62: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Un aspecto fundamental es disponer de una identidad univoca

Page 63: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Para empezar es importante como firmamos

La falta de normalización de los nombres de los investigadores en las principales bases de datos:

• Disminuye la visibilidad a nivel nacional e internacional.

• Dificulta la recuperación de las publicaciones y de las citas recibidas.

Torres-Salinas, Daniel. La importancia de la firma en las publicaciones científicas. Marzo 2013

Page 64: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Los identificadores son vitales para la interconexión

de sistemas

Page 65: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Ficha de autor de identidad personal en DIALNET con

conexiones a BNE, ISNI, LC, VIAF, Scopus…

Page 66: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

El Fichero de Autoridades Virtual Internacional (FAVI), en inglés:

Virtual International Authority File (VIAF) es un proyecto de bibliotecas nacionales y operado por el Online

Computer Library Center (OCLC) para unir los ficheros de autoridad

virtual de aquellas bibliotecas.

Page 67: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Identificador Estándar Internacional de Nombres (ISNI, siglas de su nombre en inglés: International Standard Name Identifier) es un sistema para identificar de forma inequívoca las identidades públicas de quienes

contribuyen a contenidos en medios como libros, programas de televisión y artículos de periódicos.

Page 68: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Library of Congress Name Authority File (NAF)

Page 69: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Catálogo de autoridades de la BNE

Page 70: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Catálogo de autoridades de la BNF

Page 71: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

ORCID

ISNI

ResearcherID

AutorIDLCNAF

VIAF

Identificadores AUTodos estos

esfuerzos han cristalizado en el proyecto ORCID

Page 72: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

ORCID es un proyecto abierto, sin ánimo de lucro, comunitario, que ofrece un sistema para la identificación inequívoca de

investigadores y un método claro para vincular las actividades de investigación y los productos de estos identificadores.

Page 73: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

• ORCID es aceptado por organizaciones y editores científicos tan importantes como Nature, Elsevier, Thomson-Reuters, CrossRef, Springer, Wiley, etc.

• El identificador único ORCID es independiente y normalizado de acuerdo con la norma ISO 27729:2012. Consta de 16 dígitos que forman un código único, persistente asociado a cada autor registrado en ORCID.

•Se trata de un código único personal sincronizado con los diferentes identificadores de cada investigador en los principales portales académicos

• El identificador único ORCID permitirá a cada investigador conectar directamente con sus IDs en Scopus, WOK (Web of Knowledge), CrossRef y transferir los datos de sus publicaciones de manera automática desde estos portales hacia ORCID,

Page 74: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Crear un perfil de ORCID es muy sencillo, 1 Registro,

2. Añadir publicaciones automáticamente, y 3. Uso

en revistas, portales..

Page 75: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Nombres alternativos

Registro y n. ORCID

Qrorcid

Page 76: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

ID deORCID

Julio Alonso-Arévalo http://orcid.org/0000-0002-4458-0380

Page 77: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

ORCID permite añadir automáticamente las publicaciones a nuestros perfil desde importantes y diversas fuentes de información como Scopus,

Research ID, CrossReff, Redalyc, etc.

Page 78: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

AÑADIR INFORMACION A ORCID

Sitios desde donde buscar trabajos para

añadir

Page 79: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Podemos añadir nuestros registros

desde otras plataformas a

ORCID simplemente con

un clic

Page 80: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Añadir a ORCID

Page 81: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Es importante que sea visible a TODOS

Page 82: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Información de ORCID al consultar SCOPUS

Page 83: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Esquema• Introducción. Tendencias científicas• ¿Cómo se ha medido la ciencia los últimos 60 años?• Una ciencia más interconectada: DOIs, URIs y URLs persistentes• ¿Qué es Altmetrics? Ventajas, Inconvenientes• Herramientas altmetrics• ¿Qué sitios están incorporando medidas altmétricas?• Conclusiones

Page 84: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones
Page 85: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Altmetrics, abreviatura de métricas alternativas, es una metodología de desarrollo rápido para medir el impacto de los trabajos académicos y de

investigación publicados en el web.

Page 86: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

J. Priem, D. Taraborelli, P. Groth, C. Neylon (2010), Altmetrics: A manifesto, 26 October

2010. http://altmetrics.org/manifesto

Manifiesto Altmetric0, 2010

Page 87: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

La influencia generada por los medios sociales ha sido calificada como Investigación 2.0, Social reference o Altmetrics.

Algunos estudios previos como los desarrollados por Tim Brody habían hecho la correlación entre el número de vistas y descargas a un documento y el número de citas recibidas en repositorios OA.

Aunque las mayores críticas se centran en decir que se trata de una simple medida de uso, y no de influencia científica (Neylon, Wu, 2009). Incoherencia de los datos

¿Qué es Altmetrics?

Page 88: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Los investigadores, los proveedores de fondos y las instituciones están cada vez más preocupados por el impacto y retorno de la inversión de su trabajo. Las métricas a nivel de

artículo están diseñadas para ayudar a los autores a evaluar esto proporcionando una mejor comprensión del alcance de un artículo o investigación publicada, y la atención que está recibiendo en línea.

Métricas a nivel de artículo

Page 89: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

BIBLIOMETRÍAArtículos

Citas impacto

USOVisitas

Descargas

OPINIÓN DE EXPERTOS

Peer reviewComentarios

ACTIVIDAD ACADÉMICABibliotecas digitales

Gestores de referencias sociales

COMENTARIOSBlogs científicosRedes sociales

ACTIVIDAD SOCIAL

Medios sociales

Altmetrics

Los agregadores altmetrics recopilan información de las interacciones que se

producen en herramientas sociales

Page 90: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Métricas a nivel de artículo

Para realizar este SEGUIMIENTO de las menciones en línea para una parte específica de la investigación, se tienen en cuenta tres cuestiones • Un documento fuente (artículo de revista,

informes, imágenes)• Un identificador (DOI, RePeC, PUbMed id, Arxiv

ID, SSRN… )• Menciones recibidas.

Page 91: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Ventajas

Page 92: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Ventajas• Extiende el impacto más allá del ámbito académico• Mas comprensivo• Es menos manipulable (?)• Cubre el impacto del comportamiento en línea• Medidas de impacto de formatos académicos no tradicionales• Muestra el impacto en tiempo real • Permite predecir el futuro impacto académico (?)• Puede integrarse en distintos servicios y productos (repositorio, página personal,

revistas… )• Contribuye a promocionar la identidad digital del autor

Page 93: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Nuevas perspectivas de Impacto

IMPACTO ACADÉMICO IMPACTO SOCIAL

Journal Citation ReportsCitas

DescargasVisualizaciones

MencionesGestores de referencias

Blogs…

Métricas Tradicionales Altmetrics

All-metrics

El término almetrics es confuso, ya que no es un sistema alternativo a la

métrica tradicional, si no que es un sistema complementario

Page 94: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

All-metrics vs Altmetrics

Integración entre métricas

tradicionales y nuevas (altmetrics) para dar una visión

más amplia del impacto

Page 95: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Fuentes de datosDe momento no hay una normalización de las fuentes utilizadas por los agregadores altmétricos . Aunque si

hay algunas herramientas consistentes comunes a todos ellos

Page 96: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

El impacto de la investigación no son únicamente los artículos…

Nuevas perspectivas de Impacto

Page 97: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Nuevas perspectivas de Impacto

El impacto de a investigación va más allá del resultado final (Artículo), altmetrics tiene en cuenta otros artefactos como presentaciones, vídeos, libros, set de datos… que si son integrados por las herramientas

altmétricas

Page 98: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Nuevas perspectivas de Impacto

Una perspectiva más amplia del impacto que la

ofrecida por las herramientas

bibliométricas tradicionales

Page 99: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Métricas disponibles inmediatamente

En la medición tradicional es necesario que se publiquen

otros documentos que referencien a una

investigación eso conlleva meses o años. Altmetrics

proporciona información en tiempo real desde el primer momento disponemos de datos de visualizaciones, descargas… que pueden

predecir el impacto futuro

Page 100: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Problemas

• La Inconsistencia de los datos• Mide la influencia social, no la calidad• Posibilidad de manipulación• Fuentes de información a veces no muy sólidas• Diferencias en las metodologías de recogida entre plataformas• Necesidad de normalización• ¿Qué significado tiene?

Page 101: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Inconsistencia de fuentes de datos

Page 102: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Inconsistencia de metodologíasDistintas mediciones en las herramientas para el mismo documento en

función de las metodologías o actualizaciones o fuentes utilizadas

Page 103: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Posibilidad de manipulaciónLos autores realizaron un experimento consistente en editar un falso artículo científico publicado por un supuesto investigador llamado Marco Alberto Pantani-Contador. El texto, carente de sentido alguno, fue copiado y pegado de la página web del grupo de investigación al que pertenecen (EC3: Evaluación de la Ciencia y de la Comunicación Científica), y traducido al inglés con Google Translator. Los investigadores dividieron a su vez el falso paper en seis artículos, citando en cada uno de ellos otros 129 trabajos científicos. El resultado no se hizo esperar: los tres autores materiales de este experimento, a quienes Pantani-Contador citaba en su falso artículo, vieron cómo aumentaban considerablemente sus citas en Google Scholar,

Page 104: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Fuentes a veces poco consistentes y volátiles

Connotea un gestor de referencias de

software libre desaparecido en

2014 era utilizado por herramientas altmetricas cono

altmetric.com

Page 105: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Necesidad de normalización

Altmetrics : definiciones y casos de uso

Libro blanco sobre evaluación de métricas alternativas de NISO

Especial Altmetrics en ISQ: Information Standards 

Quarterly

Los nuevos métodos cuantitativos de evaluación de investigación deben ser desarrollados y validados para extender y complementar los sistemas tradicionales de citas basados en el análisis bibliométrico. NISO el organismo normalizador estadounidense esta en ello, un claro sifno de que altmetrics llega para quedarse

Page 106: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

¿Qué significado tiene?

¿Los tweets pueden predecir las citas? Métricas de impacto social basado en Twitter y correlación con los parámetros tradicionales de impacto científico. Jason Priem*, Heather A. Piwowar**, Bradley M.

Hemminger*. Altmetrics in the Wild: Using Social Media to Explore Scholarly Impact http://

arxiv.org/abs/1203.4745v1

Artículos con poco impacto social a veces

reciben mucha atención académica

El significado de que tipo de impacto miden, y si pueden predecir el futuro impacto académico es aún incierto

Page 107: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

¿Mide la cantidad o miden la calidad?

¿Es una simple medida de popularidad?

Page 108: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Esquema• Introducción. Tendencias científicas• ¿Cómo se ha medido la ciencia los últimos 60 años?• Una ciencia más interconectada: DOIs, URIs y URLs persistentes• ¿Qué es Altmetrics? Ventajas, Inconvenientes• Herramientas altmetrics• ¿Qué sitios están incorporando medidas altmétricas?• Conclusiones

Page 109: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

HERRAMIENTAS Altmétricas

Page 110: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Herramientas más usadas para la medición científica

https://101innovations.wordpress.com/2015/10/08/2am-altmetrics/

Page 111: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Plos ALMNuevas herramientas, nuevos indicadores, que generan estadísticas de la actividad de la actividad e interacciones entre sus usuarios

http://article-level-metrics.plos.org/

Page 112: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones
Page 113: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones
Page 114: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

http://www.altmetric.com/details.php?domain=api.altmetric.com&citation_id=571540

Fuentes de datos utilizadas por Altmetic.com

Page 115: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

El color del rosco Altmetric es distinto en función de la influencia recibida. Azul significa más influencia en twitter, Rojo mayor

influencia en prensa, Amarillo representa una mayor atención en blogs

Page 116: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Puntuación

La puntuación es una medida cuantitativa de la atención que ha recibido un artículo académico, y se muestra en el centro del icono de rosquilla. La puntuación se deriva de tres factores principales:

• Volumen: la puntuación de un artículo aumenta a medida que más gente lo menciona.• Fuentes: cada categoría de mención contribuye con una cantidad de base diferente a la

puntuación final.• Autores: con qué frecuencia el autor de cada mención habla de artículos académicos e influye en

la contribución de la mención.

Page 117: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

PONDERACIÓNPuntuación

Se trata de un sistema de puntuación ponderada en función de la calidad de la

fuente, no considera la misma puntuación para

un medio de comunicación de prensa de ámbito nacional que local o internacional…

Page 118: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Análisis

Facilita el análisis de la atención que cada artículo está recibiendo de fuentes no tradicionales, incluyendo:

• La corriente principal de mención en sociales medios• Atención recibida en documentos de política• Veces que se compartió en gestores de referencias en línea• Revisión por pares a la postpublicación• Explora las conversaciones que rodean el contenido• Identifica trabajos recientes interesantes• Demografía en línea para que los usuarios puedan ver en qué partes del mundo provienen las

menciones.

Page 119: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Información para los autores

• Inscribirse para recibir alertas de correo electrónico altmetrics, para ser notificado cuando un artículo recibe una nueva mención en línea

• Mejorar su puntuación altmetrics: Leer este artículo de blog altmetrics para algunas ideas y consejos: http://www.altmetric.com/blog/tips-and-tricks-how-to-promote-your-research-successfully-online/

• Añadir su puntuación altmetrics a su propio sitio web: Puede mostrar la puntuación altmetrics de su artículo en su sitio web personal o blog, o en las páginas web departamentales o de la sociedad de investigación, siguiendo estas instrucciones: https://www.altmetric.com/badges.php

Page 120: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Ver sample de ficha resumen

Page 121: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Procedencia geográfica

Crear alertas

2 menciones en Twitter y 10 veces

compartido en Mendeley

Page 122: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

https://www.altmetric.com/details/3819943/twitter

Pestaña TWITTER para ver las menciones

Compartir

Page 123: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

DOI sirve como vínculo de datos

Page 124: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Genera un código HTML para insertarlo en una página personal o blog

Código HTML para insertar en un blog

Page 125: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones
Page 126: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones
Page 127: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Fuentes que utiliza PlumX Metrics • Amazon• Bit.ly• CrossRef• Delicious• Dryad• dSpace• EBSCO• ePrints• Facebook• figshare

• Github• Goodreads• Google+• Medwave• Mendeley• PLOS• PubMed Central• Reddit• Research

Blogging

• Scopus• SlideShare• SourceForge• Stack Overflow• Twitter• USPTO• Vimeo• Wikipedia• Worldcat (OCLC)• YouTube

Page 128: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

USO

• ¿Cuántas personas han leído nuestro trabajo?

• ¿Cuántos han visto nuestros videos?

• En cuantas bibliotecas está nuestro libro (WorldCat)

clics, descargas, vistas, fondos en bibliotecas, las

reproducciones de vídeo

Page 129: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

• Las capturas indican que tiene interés tienen otros investigadores en leer nuestro trabajo

• Es un indicador de posibles futuras citas

Marcadores, favoritos, lectores, …

CAPTURAS

Page 130: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

• Permite descubrir automáticamente las conversaciones sobre nuestra investigación

• Descubre comentarios, opiniones, etc.

• Esta categoría mide la gente que realmente se compromete con nuestra investigación

blogs, comentarios, revisiones, Wikipedia,

linksMENCIONES

Page 131: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

• Medidas de medios sociales índica como un investigador está promoviendo su trabajo

• Esto es especialmente importante para los investigadores que inician su carrera para conocer que áreas de investigación tienen más impacto

• Realizar el seguimiento de la atención en torno a su investigación

+1s, Me gusta, compartido, tweets

MEDIOS SOCIALES

Page 132: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

• Las citas son todavía un nivel de impacto a largo plazo

• Incluyendo las citas permite el análisis conjunto de todas las categorías de métricas

PubMed Central, Scopus, patentes

CITAS

Page 133: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Ideograma de PlumX, sólo otorga datos, no hace

valoración de la atención recibida por la investigacion

Page 134: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Página de autor

Page 135: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Página de un departamento

Page 136: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones
Page 137: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

https://impactstory.org/

Page 138: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

https://impactstory.org/

Si se tiene un perfil ORCID se genera el

registro en ImpactStory

automáticamente

Page 139: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Al entrar al registro debemos

identificarnos en ORCID

Page 140: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

https://impactstory.org/u/0000-0002-4458-0380

Sincronizar con ORCID

Borrar el perfil

Page 141: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Menciones

https://impactstory.org/u/0000-0002-4458-0380

Page 142: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

OPEN SESAME

Has publicado el 53% de su investigación en lugares de acceso abierto de oro. Este nivel de apertura se corresponde con sólo el 4% de los investigadores.

GREATEST HITS

Su publicación más discutida ha sido mencionada en línea 2 veces. Su mayor éxito es sobre lectura digital

FOWLER FRENZY

Alguien con 3,3 mil seguidores ha twitteado su investigación.Gracias, @jalonsoarevalo.

ALL READERS WELCOME. Su escritura tiene un nivel de lectura fácilmente comprensible en el grado 11 y superiores, sobre la base de sus resúmenes y los títulos. Eso está muy bien – ya que ayuda a los laicos y profesionales a utilizar su investigación-. También tiene 8% en la legibilidad.

LOGROS

Page 143: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Detalles de las menciones

Page 144: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Publicaciones compiladas automáticamente a través

de ORCID

Page 145: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Conexión con Altmetric.com

Page 146: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Conexión con Altmetric.com

Page 147: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Esquema• Introducción. Tendencias científicas• ¿Cómo se ha medido la ciencia los últimos 60 años?• Una ciencia más interconectada: DOIs, URIs y URLs persistentes• ¿Qué es Altmetrics? Ventajas, Inconvenientes• Herramientas altmetrics• ¿Qué sitios están incorporando medidas altmétricas?• Conclusiones

Page 148: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

¿Qué sitios están

incorporando medidas

altmétricas?

Page 149: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Sitios que incorporran altmetrics• Nature o Science reconocen que el uso de altmetrics les ha proporcionado

una mayor cobertura de sus publicaciones en los medios y eventualmente un mayor número de citas.

• Canales nicho como blog o revistas de poca cobertura también reconocen que el uso de medidas altmetricas beneficia un mayor reconocimiento y visibilidad, construyendo estrategias más eficaces de promoción de sus publicaciones.

• En esta misma línea, Elsevier reconoce que aquellos artículos donde ha incluido medidas altmétricas reciben mayor atención.

• Taylor &Francis también incluye datos almétricos en su Top 20. • MIT Press también está incorporando medidas altmétricas en sus

publicaciones de Batches Books Series

Page 150: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Sitios que incorporran altmetrics

Los departamentos de marketing y publicación utilizan estas medidas para poder tener datos fiables y determinar el éxito de sus páginas, conocer la procedencia geográfica de uso y de esta

manera establecer estrategias de mercado.

Page 151: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Sitios que incorporran altmetrics

Altmetrics proporciona un importante potencial a las publicaciones de aquellas áreas tradicionalmente menos representadas en el ámbito de la medición bibliométrica tradicional como es

el caso de las Humanidades

Page 152: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Repositorios

Page 153: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Repositorios

Page 154: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Desde la 14ª edición del Ranking Web de Repositories, en su última versión de 2014 incluye mediciones Altmetrics de las siguientes fuentes en el indicador Visibilidad: Academia, Facebook, LinkedIn, Mendeley, ResearchGate, Slideshare, Twitter, Wikipedia (todas las ediciones), Wikipedia (versión Inglés) y YouTube (25%)

Page 156: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones
Page 157: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones
Page 158: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones
Page 159: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones
Page 160: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

En algunos registros de SCOPUS – SCiVerse podemos ver ya el rosco de Altmetric.com

Page 161: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Zenodo es un repositorio de datos impulsado por OpenAire y el CERN

Page 162: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Interacción con ORCID

Page 163: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Beneficios para los investigadores

• Monitorizar el rendimiento de sus trabajos• Demostrar el valor de sus publicaciones• Descubrimiento de nuevas propuestas

Page 164: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Beneficios para los bibliotecarios• Bibliotecas y bibliotecarios poseen la cualificación

necesaria para proporcionar en su instrucción el uso apropiado de medidas altmétricas con el fin de promover en la comunidad académica global el impacto y valor de la investigación producida en sus instituciones

• La gran cantidad de resultados de Google que citan tanto “Libguides” y “Altmetrics” indican que “las bibliotecas ya están incorporando información altmétrica en los recursos para la comunicación científica, el impacto y la gestión de citas

• Así lo demuestra la investigación de la universidad de Utrech sobre uso de herramientas de medición científica

González-Fernández-Villavicencio, Nieves and Domínguez-Aroca, María-Isabel and Calderón-Rehecho, Antonio and García-Hernández, Pablo ¿Qué papel juegan los bibliotecarios en las altmetrics? Anales de Documentación, 2015, vol. 18, n. 2, pp. 1-19.

Page 165: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Esquema• Introducción. Tendencias científicas• ¿Cómo se ha medido la ciencia los últimos 60 años?• Una ciencia más interconectada: DOIs, URIs y URLs persistentes• ¿Qué es Altmetrics? Ventajas, Inconvenientes• Herramientas altmetrics• ¿Qué sitios están incorporando medidas altmétricas?• Conclusiones

Page 166: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Conclusiones• Los medios sociales en la comunicación académica ofrecen nuevas oportunidades para

aumentar la difusión y visibilidad de la investigación• Facilitan varios aspectos de la comunicación académica• Aumento de la prevalencia en el mundo académico• Importancia especial para las áreas menos representadas en los índices de citas clásicos• Aún su significado es incierto• Es necesario trabajar en la normalización y la cohesión de los datos• En los sistemas de acreditación, los investigadores podrán demostrar las interacciones sociales

de su investigación• Almetrics no va a ser una moda pasajera

Page 167: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Conclusiones finales• La combinación de medidas bibliométricas y altmétricas acrecienta las

oportunidades y muestra una imagen más amplia y precisa del impacto de una investigación

• La naturaleza del impacto de la investigación es cada vez más amplia y multifacética que nunca. La incorporación junto a la medición ortodoxa de medidas alternativas presenta una oportunidad para obtener una visión más holística del impacto de la investigación y su influencia

• El valor de altmetrics como una herramienta complementaria de análisis de citas es evidente, aunque se sugiere que se debe investigar más profundamente sobre esta cuestión para desentrañar el significado

Page 168: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

ACCIONES INMEDIATAS

1. Crea tu perfil en Google Académico

2. Deposita en Acceso Abierto

3. Crea tu perfil en ORCID

4. Utiliza Mendeley

5. Divulga en Redes Sociales

ALGUNO

S CONSEJO

S

Page 169: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Julio Alonso Arévalo

Grupo E-LECTRA

Universidad de Salamanca

[email protected]

Page 170: Almetrics: Métricas alternativas e impacto social de la investigación significado e implicaciones

Métricas alternativas e impacto social de la

investigación

Julio Alonso Arévalo

Grupo E-LECTRA

Universidad de Salamanca

[email protected]