Taller de Bibliometría y Evaluación de la...

Taller de Bibliometría y Evaluación de la

Ciencia

Valencia, 4-5 noviembre 2009

Evaristo Jiménez Contreras

Álvaro Cabezas Clavijo

ec3 - Evaluación de la Ciencia y de la Comunicación Científica

http://ec3.ugr.es

• La comunicación de la ciencia• Los indicadores bibliométricos y la evaluación de la

actividad investigadora• Bases de datos para evaluación de la ciencia• Búsquedas documentales y descargas de registros

desde bases de datos• Tratamiento documental de la información científica• Elaboración de informes basados en parámetros

bibliométricos• Software para evaluación de la ciencia

Índice

La comunicación de la ciencia

Taller de Bibliometría y evaluación de la ciencia

Los indicadores bibliométricos y la evaluación de la actividad

investigadora

• Axiomas previos:• Perspectiva Mertoniana de la Ciencia

• El prestigio de los científicos es proporcional al prestigio de su obra y ésta a su vez se viene cuantificando a través de las revistas en las que publica

• Efecto Mateo vs hipótesis de Ortega

– Dimensiones de la actividad científica• Los productos de la actividad científica son las publicaciones• Las citas son una medida fiable de la repercusión de los

trabajos

Consideraciones generales

• La evaluación es inherente a la actividad científica.– La revisión por expertos es lo que diferencia las

revistas científicas de las restantes• Es cualitativa/cuantitativa• La evaluación aplicada a la actividad científica

se emplea usualmente en su versión ex-ante, se valoran los proyectos científicos antes de financiarlos y se determinan las orientaciones científicas (cualitativa)

• Pero la gestión científica debe apoyarse en la evaluación ex-post (cuantitativa)

Evaluación y actividad

científica

• Entre la república de la Ciencia…– La evaluación ex post no es necesaria porque– “the results of any one particular investigation

cannnot be predicted with accuracy” (Bush, V. 1945)

• …y la Ciencia responsable.– Bernal JD, la responsabilidad social del científico– Los poderes públicos pueden y deben controlar la

orientación de la Ciencia

Nacimiento de la Política científica

La actividad científica: elementos de la evaluación

• Output de la actividad científica– Conocimiento certificado: Artículos en revistas con

evaluación por pares o medios asimilables– Actividad económica: patentes, contratos, spin-off– Acciones de interés general: programas de

investigación públicos o privados– Formación: libros, docencia, tesis...– Divulgación: medios de comunicación,

exposiciones..

El ciclo de producción de conocimientos certificados y del reconocimiento

Experimentación, datos

Lectura de artículos

Preparación del artículo

Publicación

Difusión

Audiencia específica: colegas, sugerencias

Aplicaciones

Empresa pública o privada

Temas

Proyectos

FinanciaciónRecursos

• LOS ARTÍCULOS EN EL CICLO DE PRODUCCIÓN DEL CONOCIMIENTO

– Producción e interpretación de datos• “percepción de que el acervo de conocimiento es insuficiente”• Metodología, Experimentación, análisis de datos, interpretación

– Publicación• Redacción del trabajo, envío a una revista, revisiones, publicación

– Interactuación• Impacto, aplicaciones, nuevos proyectos

– Reconocimiento• El impulso de los científicos, la lucha por el reconocimiento: el papel de las

citas:– Pago del crédito debido– Instrumento de persuasión

– Biblioteca, archivo y registro

– Son también un ESLABESLABÓÓN EN EL SISTEMA DE EVALUACIN EN EL SISTEMA DE EVALUACIÓÓN, un N, un medio indirecto para evaluar la actividad investigadora de los autores que publican sus resultados en las mismas

Produciendo conocimiento

• Investigación• Producción

• Producción: bruta, nacional/internacional• Productividad por autores• Cuota de participación por campos, país, etc.• Presencia en bases, o en conjuntos predeterminados

• Impacto• Difusión o visibilidad… en definitiva: citas.

• Citas absolutas, relativas, índice H• Fis

• Tal cual• Presencia por cuartiles, terciles, deciles…• Impactos normalizados

• Documentos citados en el “core” de la especialidad• Citas en determinadas obras• Hábitos de citación

Qué elementos se consideran en las evaluaciones científicas

• Dirección y desarrollo de la investigación– Dirección de investigación

• Tesis doctorales dirigidas– Resultados académicos de las mismas

• Grupos de investigación: nacionales/internacionales• Labores de gestión: dirección de departamentos, servicios,

etc.

– Presencia en programas de investigación, doctorados (“de calidad” si puede ser), redes temáticas.

Qué elementos se consideran en las evaluaciones científicas

• Reconocimiento– Premios de investigación– Invitaciones– Participación en comités: revistas, congresos, etc..– Tramos de investigación o equivalentes– Ofertas de trabajos de instituciones– Juicio de expertos en cuanto a reputación de los

investigadores

Qué elementos se consideran en las evaluaciones científicas

• Financiación– Fondos obtenidos en

programas competitivos y cuantía

• Nacionales/internacionales• Sectoriales• Privados

• Becas nacionales, internacionales

• Becarios

• Docencia• Tasa de graduaciones en

los distintos ciclos• Capacidad de atracción de

estudiantes• Encuestas• Innovación docente

• Otros• Patentes• Éxito laboral• ...

Qué elementos se consideran en las evaluaciones científicas

COLABORACIÓN

Nº Autores/trabajo

Patrones colaboración

Ordenes de firma

RELACIONALES

Análisis de co-palabras; redes de colaboración

Qué elementos se consideran en las evaluaciones científicas

• Tradicionales (recuentos y promedios):

– Factor de impacto, con diferentes períodos– Percentiles– Inmediacy Index– Citas/articulos,

– Half-life– Citas totales (en un período detiempo)

• Planteamiento similar (Citas con pesos):– Scimago Journal Rank– Eigenfactor– Article influence

• Orientadas a autores o similares:– H-index– Pagerank

Medidores del impacto de las publicaciones y/o de los autores basados en citación

Journal of Citation Reports (JCR)

Ejemplo: Factor de Impacto de la revista NATURE en 2004

Citas recibidas durante 2004 de los artículos publicados en:2003: 28,5772002: 27,678 56,255

Número de artículos publicados en:2003: 8722002: 876 1,748

Cálculo: FI – NATURE (2004) = 56,2551,748

= 32.18

Glosario ISI: “El Factor de Impacto se calcula como el número de citaciones en un

cierto año a los documentos publicados en los dos años anteriores

dividido por el número de documentos publicados por esa revista en

el mismo período de tiempo”.

Cálculo del Factor de impacto

21 −− +=

nnn YPYP

CnFIFactor de Impacto en año n

Un investigador tiene un índice h cuandoh de sus documentos han recibido al menos h citas cadauno, y el resto tiene no más de h citas por documento.

El índice H

Hirsh, J.: An index to quantify an individual'sscientific research output. PNAS November 15, 2005,46 16569-72

Bases de datos para evaluación de la

ciencia

Taller de Bibliometría y evaluación de la ciencia

Elección de la fuente de información

• Encontrar una BBDD que responda a nuestras necesidades en función de lo que queremos evaluar

• BBDD Nacional o Internacional• BBDD Temática o multidisciplinar• BBDD de producción, actividad científica o

para el análisis

BBDD Internacionales

Multidisciplinares– WoS– Scopus– Google ScholarTemáticas– Medline– Inspec– PsycInfo– …

• JCR• ESI• Eigenfactor• SJR

PRODUCCIÓN ANÁLISIS• Esp@cenet• WIPO• NTIS• UMI

ACTIVIDAD

Web of Knowledge (WOS, JCR, ESI)

• http://www.accesowok.fecyt.es/wos/• BBDD de referencia en la ciencia mundial para

estudios bibliométricos• Cubre las mejores revistas en todas las áreas

temáticas• Indiza más de 10.000 revistas y 100.000 actas

de congresos (40 millones de registros)• Consta de varios índices (SCI, SSCI, AHCI y

CPCI)• Orientación anglosajona y a ciencias básicas• 149 revistas españolas a fecha abril 2009

(Rodríguez-Yunta, L. Revistas españolas en WoS, 2009)

Web of Science (WOS)

Búsqueda básica (13 campos de consulta)

• Year published: año de publicación del artículo

• Timespan: años en que la referencia ha sido procesada por WoS

Cuidado con la búsqueda por fechas

1

2

Búsqueda de autores (authorfinder)

Ejemplo: Emilio Delgado López-Cózar

• Selecciona la forma adecuada

• Añade otra posible firma del autor

3

4

5

Resultados

6 7

8

Refina por áreas o instituciones

• Cuidado con la sintaxis de WoS• Cuidado con los autores con dos apellidos• Cuidado con los homónimos• Cuidado con nombre regionales,

abreviaturas o “nombres artísticos”• Cuidado con los errores de indización• Extremo cuidado al limitar por los campos

afiliación o categoría JCR

O usa directamente la búsqueda básica, pero…

• No admite tildes ni eñes• Sólo la(s) inicial(es) del nombre de pila• Admite operadores booleanos en el

mismo cuadro de búsqueda• Truncamiento con * para ampliar las

búsquedas

Cuidado con la sintaxis de WoS

• El porcentaje de investigadores españoles que aparecen bajo dos o más nombres diferentes oscila entre un 20% y un 40% según los estudios (Costas et al. 2006; Ruiz-Pérez et al. 2002).

• Los propios investigadores son responsables de esta variabilidad en su forma de firma, ya que utilizan distintas formas a lo largo de su producción

• Además, las bases de datos bibliográficas cometen con errores al transcribir la información a su registro electrónico, sobre todo derivadas de sus prácticas de indización adaptadas a las estructuras de nombres ingleses

Cuidado con los autores con dos apellidos

• Es complejo diferenciar entre autores homónimos, apellidos comunes, etc (López E, Rodriguez JM, Garcia A)

• En este caso hay que usar las opciones de WoS para refinar los resultados, a sabiendas de que podemos perder un pequeño porcentaje de la producción del autor

• La mejor forma de evitar este fenómeno es asesorar a los investigadores para que usen firmas lo más distintivas posibles.

Cuidado con los homónimos

• Ramón Moncho• José Luis Koldo• Javier Xavier• Rosario Charo• Cuando hagamos búsquedas de autores es

conveniente visitar antes su web personal, nos puede dar pistas sobre cómo firma, en qué revistas publica, sus colaboradores, …

Cuidado con nombres regionales, abreviaturas o nombres

“artísticos”

Autores

Instituciones

Cuidado con los errores de indización de WoS

AFILIACIÓN• Autores en estancias fuera de la institución a

veces no firman con su institución de origen• Autores con doble filiación a veces no usan ambas• La tipología Proceedings paper incluye sólo la

institución del primer firmanteCATEGORÍA JCR• Las revistas pueden estar asignadas hasta a 5

categorías ISI• Autores con investigación multidisciplinar

Extremo cuidado al limitar por afiliación o categoría

jcr

Para el caso de las instituciones

• Piensa todas las posibles variantes de una institución

• WoS usa abreviaturas estándar y elimina las preposiciones

• universidad = univ; hospital = hosp

• Universidad de Murcia = UnivMurcia

• Universidad Politécnica de Valencia = ?

Para las instituciones

• Opciones de filtrado de los resultados por áreas, tipos de documentos, años, instituciones, países, fuentes, autores, idiomas

• Opciones de análisis de resultados e informes de citación

• Opciones de ordenación• Historial de

búsquedas

• Opciones de exportación, impresión y guardar en listas

• Encuentra las citas a un artículo, libro, … (incluso si no está recogido en WoS) pero ha sido citado desde las revistas indizadas en WoS

• Ejemplo: citas recibidas por los artículos publicados en 2007 en la revista NO ISI Anales de Documentación

Cited Reference Search

• Thomson cuenta con un listado maestro (master list) donde aparecen las revistas recogidas en sus índices de citas http://science.thomsonreuters.com/mjl/

¡Ojo! No confundir con JCR: No todas las revistas incluidas en WoS tienen factor de impacto JCR

Cómo localizar las revistas indexadas en la WoS

• ¿Qué producción tiene la Universidad de Vigo en 2008?– ¿Cuál es su promedio de citas?– ¿Qué país es su principal colaborador?

• ¿Cuántas citas ha recibido Pedro Cavadas en sus trabajos publicados en la revista J PLAST RECONSTR AES ?

• ¿Qué revista tiene como ISSN 1532-2882?– ¿En qué productos de Thomson está

recogida?

Práctica

• http://www.accesowok.fecyt.es/jcr/• Base de datos que recoge los factores de impacto

de las revistas científicas seleccionadas por Thomson Reuters

• Podemos delimitar la búsqueda por año, categoría temática y países

• Recoge otros indicadores como posición de la revista en su categoría, índice de inmediatez, porcentaje de autocitas,

Journal Citation Reports(JCR)

Factor de impacto de la revista

Categorías JCR a las que se adscribe

Posición de la revista en dichas categorías

Información básica de una revista

• Si queremos recopilar sistemáticamente todos los indicadores JCR; FECYT ofrece los listados de impactos en formato exceldesde 2002 http://www.accesowok.fecyt.es/news/2007/20070709.html

Descarga de JCR

• Cuál fue el factor de impacto de la revista JAMA-JOURNAL OF THE AMERICAN MEDICAL ASSOCIATION en 2008?

• ¿Cuál es la revista con mayor impacto de la categoría Allergy?

• ¿En qué cuartil se sitúa la revista El profesional de la Información en 2008?

Práctica

• http://www.accesowok.fecyt.es/esi/• Indicadores a nivel macro de producción y citación• Nos proporciona un marco comparativo; podemos

confrontar los registros de un investigador o institución con áreas / países, etc

Essential Science Indicators(ESI)

Papers más citados

Evolución anual Ránking de paises para la categoría

• ¿Qué posición ocupa España en número total de citas en el área de Matemáticas?

• ¿En qué percentil de la distribución se encuentra un autor del área de Ciencia de Materiales que publicó un trabajo en 2004 y que ha recibido 13 citas hasta la fecha de hoy?

• ¿Cuál es el número mínimo de citas que necesita un autor de Psicología para situarse dentro del 1% más citado en 2007?

Práctica

• http://www.scopus.com/• Base de datos multidisciplinar de Elsevier• Competencia directa de WoS• Casi 18.000 titulos diferentes• 38 millones de registros• 16500 revistas revisadas

• Fuente: Scopus in detail

Sin embargo,…

• No es tan selectiva como WoS• Prima la cantidad de fuentes sobre la “calidad” de las mismas

Scopus

Búsqueda básica (18 campos)

Basic Search

Affiliation Search

Búsqueda por institución

Ejemplo 1: Universidad de Murcia

Basic Search

Affiliation Search

Ejemplo 2: AIDICO

Búsqueda por institución

Affiliation Search

Ejemplo: Emilio Delgado López-Cózar

Cuidado en las búsquedas por autor

• Problemas de normalización de autores e instituciones solventadas en gran parte con “authorsearch” y “affiliation search”

• Guiones y tildes en la búsqueda afecta a los resultados

• Autores pueden estar indizados por el segundo apellido

• Errores ortográficos, fallos OCR,…Administradores y gestores documentales deberían ocuparse de la correcta indización de sus autores en las bases de datos internacionales

Cuidado en las búsquedas por autor

• Refinar búsquedas (limitar /excluir)• Añadir categorías de filtrado• Ordenar resultados según criterios ascendente /

descendente• Análisis de citas• Exportar resultados

Resultados

• http://help.scopus.com/flare/Content/tutorials/sc_menu.html

• Master List en http://info.scopus.com/detail/what/documents/title_list.xls

Tutoriales interactivos

• ¿cuál es el artículo más citado de tu institución en 2007?

• ¿cuántos artículos publicó Bernat Soria entre 2006 y 2008?

• ¿cuál es el índice h del famoso cirujano plástico Pedro Cavadas?

Práctica

• Subproducto de Google especializado en buscar e identificar material bibliográfico publicado de carácter científico-académico

• ¿Qué encuentra?– Referencias bibliográficas con resúmenes– Textos completos– Citas

http://scholar.google.es/

Google Scholar

Diapositiva 58

em1 emilio delgado; 22/08/2008

Simple

Avanzada muy pocas opciones de búsqueda por campos

Búsquedas simple y avanzada

3. Resultado que nos dirige a una fuente secundaria donde se recoge el documento

2. Resultado que nos devuelve una cita

1. Resultado que nos dirige al documento original a texto completo

Tipos de resultados

• Breve descripción bibliográfica del documento (título, autores, revista/fuente, año).

• (1) Tipo de documento, formato (pdf, html) o el tipo documental (libro, cita)

• (2) Flecha verde indica que GS da acceso al texto completo • (3) Web fuente de la información (servidor, repositorio, etc.) • (4) “citado por”, muestra el listado de documentos recopilados por GS

que citan el trabajo• (5) Versiones que ha localizado de un mismo trabajo (preprints, etc).

La versión del editor, si se indexa, es la versión principal. • Otras opciones: exportar el registro a un software de gestión

bibliográfica (6) localizar el documento en una biblioteca (7)

Estructura de un registro en GS

• Identifica y muestra todas las posibles versiones de un documento que figuren en sus índices

• El rastreador de GS identifica todas las localizaciones en distintas URLsa las que puede acceder

Versiones del mismo documento

Diapositiva 62

em2 emilio delgado; 22/08/2008

Versiones del mismo documento

– Libros– Artículos de revistas científicas– Comunicaciones y ponencias a congresos– Informes científico-técnicos– Tesis, tesinas o memorias de grado– Trabajos científicos depositados en repositorios, archivos

de preprints– Páginas web personales o institucionales etc…– Cualquier publicación con resumen

• No cubre– Reseñas de libros y editoriales– Libros de texto y monografías– Periódicos y revistas comerciales

Cobertura de Google Scholar

Diapositiva 64

em3 emilio delgado; 22/08/2008

• Tradicional mala cobertura de revistas de Humanidades y Ciencias Sociales. Política de expansión en la actualidad en estos ámbitos del conocimiento.

▼

• Mala cobertura de las revistas de Humanidades y Ciencias Sociales presentes en otras bases de datos (MLA Bibliography, Philosopher’sIndex, PsycInfo, SociologicalAbstracts, …)

▼

• Rigurosos proceso de selección de las revistas científicas, especialmente en la Web of Science

▲

• No existe ningún tipo de control en los procesos de selección de las revistas que indiza por la que todo tipo de revistas tienen cabida

▼

COBERTURA DE REVISTAS CIENTÍFICAS

Comparativa GS vs WoS/ScopusÍndices de citas multidisciplinares

(Web of Science; Scopus)Google Scholar

• Solo localiza citas de revistas y congresos▼

• Localiza citas emitidas por los documentos no cubiertos por otras bases de datos, especialmente desde preprints, congresos o tesis doctorales. Esta característica lo hace especialmente útil para las siguientes disciplinas: Humanidades, Ciencias Sociales e Ingenierías

▲

• Acceso directo al documento si la biblioteca lo tiene contratado

▲• Acceso directo al documento si la biblioteca lo tiene contratado

▲

• Acceso solo a la referencia de los artículos▼• Acceso directo a publicaciones científicas a texto completo y gratuitas

▲

• Dominio de la literatura de carácter anglosajón. Especialmente en WoS

▼• Mayor cobertura de literatura en lenguas nacionales ▲

• Contenidos exclusivamente científicos y mayoritariamente sometidos a revisión

▲• Cobertura de documentos que podrían no ser de carácter académico: programas de asignaturas, guías de biblioteca, temarios, etc...

▼

• Solo cubren los contenidos de revistas científicas y recientemente libros de actas de congresos (WoS: Conference Proceedings Citation Index)

▼• Posibilidad de encontrar documentos muy diversos: pre-prints, artículos revistas, libros, tesis, informes, comunicaciones a congresos…

▲

• Cobertura de una amplia tipología de fuentes de información: repositorios, bases de datos, catálogos on-line de bibliotecas, web personales e institucionales (universidades, institutos de investigación, sociedades científicas, empresas…), productos de Google (Google Patents y Google Books)

▲

• Transparencia absoluta en las fuentes que componen las bases de datos. Disponibilidad de Master List actualizados

▲• Falta de trasparencia en la cobertura. No se declaran acuerdos con editoriales ni de las fuentes que se indizan

▼

COBERTURA GENERAL

• Pago de licencias▼• Libre Acceso▲

PRECIO

Índices de citas multidisciplinares(Web of Science; Scopus)

Google Scholar

• Incluyen diversas opciones de filtrado (disciplina, año, tipo documental) que nos permiten refinar las búsquedas

▲• Solo incluye el filtrado por 7 disciplinas▼

• Cada registro está clasificado en una tipología documental (artículo, revisión, carta, nota, recensión, etc….)

▲• No identifica ante que tipología documental nos encontramos. Tan solo los libros

▼

• Localiza las diferentes versiones de un documento y las agrupa bajo un mismo encabezamiento de título

▲

• Se puede consultar todos los resultados que una consulta genera

▲• Solo se muestran los 1000 documentos en cada consulta

▼

• Posibilidad de exportar los resultados a software de análisis de datos: Histcite, Refviz, NWB, BibExcel

▲• Posibilidad de exportar los resultados a software de análisis de datos: Publish or Perish

▲

• Presenta gran variedad de resultados duplicados

▼

• Costes de procesamiento de la información con menores costes en horas.

▲• Gran coste en el procesamiento de los datos lo que hace difícil su uso en estudios de gran escala.

▼

• Exportación de los resultados en diferentes formatos (RIS, txt, tabulados, etc…)

▲• Solo permite exportar los resultados, uno a uno, a un software bibliográfico.

▼

• Permiten ordenar los resultados según diferentes opciones (Título, Nº de citas, fecha de publicación, primer autor,…)

▲• Los resultados se presentan directamente ordenados por número de citas y no existen otras opciones

▼

• Herramientas de análisis bibliométricos on-linecomo Citation Report en WoS

▲• No tiene ninguna herramienta para analizar resultados

▼

• Posibilidad de buscar en 13 campos diferentes en WoS y 18 en Scopus

▲• Solo ofrece tres campos de búsqueda (Autor, Revista y Año de Publicación)

▼

INTERFAZ, BÚSQUEDAS y RESULTADOS

• Control absoluto de las revistas científicas

▲

• Ausencia de cualquier tipo vocabulario controlado. No existe control de las revistas científicas, éstas pueden aparecer indizadas de diferente forma

▼

• No existe normalización pero tienen herramientas para identificación de autores (WoS=Author Finder)

▲• No existe normalización de los autores▼

CONTROL DE LA INFORMACIÓN

• el texto completo de un trabajo en acceso abierto

• las citas recibidas por un trabajo• los trabajos producidos por un autor• trabajos sobre un tema

Podemos encontrar

•Es adecuado para localizar información concreta (análisis a nivel micro)…

En conclusión

Diapositiva 69

em4 emilio delgado; 22/08/2008

• Los datos de GS no tienen ninguna normalización, consecuencia de la amplia cobertura, la variedad de fuentes de información y el procesamiento automático de la información

• Para la elaboración de un mismo ranking bibliométrico el procesamiento de los datos con WoS lleva 10 horas, con Scopus 20 y con GS 300

• El programa Publish or Perishhttp://www.harzing.com/pop.htm facilita el análisis bibliométrico de resultados de GS, pero es costoso en cuanto al tratamiento de los datos

Pero no es adecuado para realizar análisis

bibliométricos

• ¿Cuál es el artículo más citado de Cavadas PC entre 2006 y 2009?

• ¿Son todas esas citas correctas?• Busca el mismo artículo en WoS,

¿cuántas citas tiene?

Práctica

• Indicadores alternativos al FI• Productos gratuitos y de libre acceso• Usan algoritmos que valoran la importancia

de la revista citante (al modo del PageRankde Google)

• http://www.eigenfactor.org/• http://www.scimagojr.com/• Diferentes fuentes para su cálculo:

Eigenfactor usa WoS; Scimago usa Scopus

Eigenfactor y SJR

BBDD Nacionales

Multidisciplinares– CSIC– DIALNET

• IN-RECS• IN-RECJ• RESH• DICE• LATINDEX

PRODUCCIÓN ANÁLISIS• TESEO• OEPM

ACTIVIDAD

http://ec3.ugr.es/in-recs/

http://ec3.ugr.es/in-recj/

IN-RECS e IN-RECJ

• Índice Bibliométrico de Revistas Científicas Españolas de Ciencias Sociales (IN-RECS) y de Ciencias Jurídicas (IN-RECJ)

• Propósito: medir impacto y proporcionar perfiles bibliométricos de Revistas, Artículos, Autores e Instituciones

• Instrumento útil para medir impacto de la ciencia producida y publicada en España

• Paliar lagunas de la WOS (sólo 33 revistas españolas en CCSS y 2 en CCJJ)

• Valorar los hábitos de publicación y citación de los científicos españoles de CCSS y CCJJ

• Proporcionar una herramienta útil a las Agencias Evaluadoras: CNEAI, ANECA, Autonómicas

• Reconocer la idiosincrasia y el carácter regional, nacional o local de la investigación en CCSS y CCJJ

¿Qué es y por qué es necesario?

• Pretende obtener el respaldo de la comunidad científica española

• Alcanzar la máxima representatividad de las distintas especialidades en las que se vertebran las disciplinas científicas de las Ciencias Sociales

• Exigencia de que las revistas fuente posean una acreditada calidad editorial

• Apliquen un sistema riguroso de selección de originales• Cuenten con reputados comités editoriales• Primar la selección sobre la exhaustividad• La ciencia es selectiva por naturaleza (Ley Bradford)• Razones económicas

Algunas consideraciones

Algunas cifras

¿Qué información nos da?

¿Qué información nos da?

Detalle Categoría y Autores más citados

• ¿Cuál es el índice de coautoría de Revista de Psicología del Deporte?

• ¿Cuál es la institución con más citas por artículo en Geografía?

• La Revista Española de Investigaciones Sociológicas, ¿ha estado algún año en el tercer cuartil de su categoría?

Práctica

Difusión y Calidad Editorial de las Revistas Españolas de Humanidades yCiencias Sociales y Jurídicas

Revistas Españolas de Ciencias Sociales y Humanas: Valoración integrada e índice de citas

• ELABORADOS POR IEDCYT (CSIC)

• UN MISMO PRODUCTO CON DIFERENTES CARAS. DICE ES UN SUBPRODUCTO ELABORADO A PARTIR DE RESH A PETICIÓN DE LA ANECA

RESH y DICE

http://dice.cindoc.csic.es/

http://resh.cindoc.csic.es/

● BASES DE DATOS

● PERIODICIDAD

● EVALUADORES EXTERNOS

● APERTURA DEL CONSEJO EDITORIAL

● APERTURA EXTERIOR DE LOS AUTORES

● ÍNDICE DE VALORACIÓN A+B

● ÍNDICE DE IMPACTO MEDIO (sin actualizar)

● CRITERIOS LATINDEX

Actualmente RESH en proceso de integración con IN-RECS

Metodología de evaluación en RESH y DICE

Detalle de categoría en RESH

¿Qué es Latindex?

Detalle de revista en DICE

Sistema Regional de Información en Línea para Revistas Científicas de América Latina, el Caribe España y Portugal

OJO tiene dos productos

- DIRECTORIO: 16,963 revistas. Información básica normalizada

- CATÁLOGO: 3,381 revistas. Selección de revistas clasificadas según el cumplimiento de unos criterios de calidad

!

!

El catálogo LATINDEX

● CARACTERÍSTICAS BÁSICAS: mención de cuerpo editorial, antigüedad, mención del director, lugar de edición, entidad editora, etc..

● PRESENTACIÓN: páginas de presentación, tablade contenidos, miembros del consejo editorial, afiliación de los autores, etc..

● GESTIÓN Y POLÍTICA EDITORIAL: sistema de arbitraje, evaluadores externos, autores externos, apertura editorial, cumple la periodicidad, etc..

● CARACTERÍSTICAS DE LOS CONTENIDOS:contenido original, resumen, palabras clave, intrucciones autores, etc…

Metodología de Latindex basada en el cumplimiento de 33 criterios repartidos en 4 bloques

Metodología de evaluación

• http://bddoc.csic.es:8080/index.jsp• Recopilan producción científica en CCSS (ISOC),

CyT (ICYT) y BIOMED (IME)• Retrasos en la indización• Buen control bibliográfico de la información• Permite la descarga de registros para

almacenarlos en local; tratamiento con gestor de referencias, …

• 2 versiones: una de acceso gratuito (registro básico) y otra por suscripción (registro completo)

CSIC

Selección y exportación de resultados

• http://dialnet.unirioja.es/• Portal de difusión de la producción científica

hispana• Proyecto liderado por la Universidad de la Rioja en

colaboración de bibliotecas universitarias españolas

• Recopila articulos (5541 revistas), congresos, capítulos de libros, tesis aunque no es exhaustivo

• Permite la selección y descarga de registros para las instituciones colaboradoras

• ¡Cuidado! A veces no recoge todos los autores de un documento y modifica el orden de los firmantes

Dialnet

Selección de documentos

Formatos de salida