Qué es y cómo utilizar el Índice de Impacto de Revistas ...ec3/publicaciones/INRECJS_Aula_Abierta.pdf · trumento medir el impacto y la repercusión científica que tiene la investigación

Qué es y cómo utilizar el Índice de Impactode Revistas Españolas de Ciencias Jurídicas*

Emilio Delgado López-Cózar, Rafael Ruiz Pérezy Evaristo Jiménez Contreras

Universidad de Granada

Fecha de recepción: 23-2-2010 • Fecha de aceptación: 15-4-2010Correspondencia: Emilio Delgado López-CózarEC3 Evaluación de la ciencia y de la comunicación científicaFacultad de Comunicación y DocumentaciónUniversidad de GranadaE-mail: [email protected]

En España, los artículos publicados en revistas internacionales han sido los protagonistas indiscuti-bles de la evaluación llevada a cabo por las distintas agencias españolas de evaluación científica. Elpunto de referencia han sido las bases de datos de Thomson Reuters y su Journal Citation Reports.Este modelo se adapta perfectamente a las conductas de publicación de las ciencias naturales y de lasalud. Sin embargo, ignora la investigación producida en las diferentes disciplinas de las ciencias so-ciales y jurídicas, que tienen en las revistas nacionales a sus principales medios de comunicación. Espor lo que este artículo presenta las características del Índice de Impacto de las Revistas Españolasde Ciencias Jurídicas, una base de datos que empleando procesos similares a los usados por Thom-son Reuters ha permitido que por primera vez en la historia de la ciencia española se pueda cuantifi-car el impacto, medido en términos de citas, de las revistas españolas, de sus insvestigadores y de lasinstituciones en que estos trabajan. Se explica la metodología usada, con partícular énfasis en los cri-terios seguidos para seleccionar a las revistas citantes. Se describen los indicaores ofrecidos por la ba-se de datos y finalmente se informa sobre la información bibliométrica que la base de datos contienede las 340 revistas evaluadas, a través de las cuales puede trazarse una precisa pintura de la investi-gación española en Derecho publicada en revistas españolas.Palabras clave: Revistas españolas; Derecho; indicadores bibliométricos; índice de impacto;IN-RECJ.

What is and how to use Impact Index in Spanish Journals of Legal Sciences. In Spain, articles pu-blished in international journals have been the indisputable protagonists of assessment carried outby the different national research activity assessment agencies. The point of reference has especiallybeen articles in the current Thomson Reuters databases and its Journal Citation Reports. This mo-del correlates publishing behaviour in Natural and Biomedical Sciences to a great extent. However,it greatly overlooks research produced in the different Social Science areas, which have and still usethe national journals as their main vehicle for dissemination. This is why this article aims to presentthe features of the Spanish Law Journals Impact Index (IN-RECJ), a database which through a si-milar process as the one used by Thomson Reuters has made it possible for the first time in the his-tory of Spanish science for us to quantify impact, measured in citations, of Spanish journals, of theresearchers and of their institutions. The methodology used is explained, with a particular emphasison the criteria followed in selecting the source journals. Data which is currently being processed bythe above mentioned index is provided relating to journals, articles, citations and authors. The indi-cators offered by the database is analysed and finally the bibliometric information that the databasecontains on more than 340 journals is assessed, through which we can have a fairly accurate pictu-re of Spanish research in Law published in Spanish journals.Keywords: Spanish journals; Law; Bibliometrics indicators; Impact factor; IN-RECJ.

Aula Abierta 2010, Vol. 38, núm. 2, pp. 3-16ICE. Universidad de Oviedo

ISSN: 0210-2773

* Trabajo resultado de los proyectos financiados por la DirecciónGeneral de Investigación (SEJ2004-08027/SOCI, CSO2008-00174/SOCI, SEJ2007-68069-CO2-01/SOCI) y por la DirecciónGeneral de Universidades (Proyectos EA2003-086, EA2004-0119,EA2005-0068, EA2006-0018, EA2006-0027, EA2007-0138)

Introducción

La medición del impacto de las revistascientíficas, basado en el recuento de citas, seha convertido en el instrumento por excelen-cia para evaluar la difusión y visibilidad, larelevancia e importancia y la calidad de laactividad investigadora de los científicos es-pañoles (Bordons y Zulueta, 1999; Buela-Casal, 2010). Desde 1989 en que se crea laCNEAI (Comisión Nacional de Evaluaciónde la Actividad Investigadora), que es el or-ganismo nacional encargado de efectuar es-ta tarea y el primero que estableció directri-ces oficiales al respecto (Jiménez, Moya yDelgado, 2003; Jiménez, Moya, Delgado,Ruiz y Fernández, 2002), en España se con-sidera que los índices de impacto de las re-vistas científicas son “indicadores objetivosde calidad… [y que] … aparecer en uno detales índices es suficiente garantía para quelo publicado en esa revista tenga aseguradasu calidad” (CNEAI, 2005). Todas las agen-cias de evaluación de la actividad científicaen España, sean nacionales como la AgenciaNacional de Evaluación y Prospectiva(ANEP) o la Agencia Nacional de Evalua-ción de la Calidad y Acreditación (ANE-CA), o regionales (ACAP, ACSUCyL, AQUCatalunya, AQUIB, ACECAU, ACCUM,UNIQUAL, AGAE, CVAEC, ACPUA) si-guen más o menos literalmente los mismoscriterios.

Para fijar el impacto de una publicaciónse requiere la construcción de bases de datosque, de una parte, registren los trabajos pu-blicados en las principales revistas de lasdistintos campos del saber y, de otra, permi-tan contabilizar las citas que dichos trabajospuedan recibir. De entre los productos queen la actualidad ofrecen estas prestacionesson los patrocinados por Thomson Reuters(anteriormente ISI: Institute for ScientificInformation) los que se han convertido en elestándar de facto en el análisis y evaluaciónde la actividad científica y en referencia in-excusable a nivel internacional (Ruiz, Jimé-nez y Delgado, 2008).

Aunque las bases de datos norteameri-canas tienen un ámbito de aplicación univer-

sal, por su vocación internacional y multi-disciplinar, presentan algunos sesgos temáti-cos, geográficos y lingüísticos que deben sertenidos en cuenta cuando se empleen con fi-nes evaluativos (Valderrama, González yAleixandre, 2007). En primer lugar, las ba-ses de datos del ISI poseen un sesgo a favorde la ciencia básica, en general, y hacia dis-ciplinas como la Física, Química, Matemáti-cas, Biología, Farmacología y Ciencias Mé-dicas, en particular, que se encuentran am-pliamente cubiertas en detrimento de lasáreas aplicadas y tecnológicas y de las cien-cias sociales y humanas, que están infrare-presentadas.

En segundo lugar, existe un sesgo a fa-vor de la ciencia producida en los países an-glosajones y a las publicaciones en lenguainglesa. Las revistas publicadas en paísescomo Suiza, Holanda, Gran Bretaña y paísesescandinavos están suprarepresentadas fren-te a las editadas en países de la periferiacientífica. El potencial editorial de estos pa-íses en las bases de datos ISI está muy porencima de su potencial editorial real. Ejem-plo paradigmático es, de un lado, Gran Bre-taña y, de otro, España que posee 165 revis-tas en el conjunto de las BD del ISI, lo cualrepresenta el 1,0% en el Science Citation In-dex Expanded, el 1,8% en el Social SciencesCitation Index Expanded y el 3,2% en elArts & Humaities Citation Index (Rodrí-guez, 2010); valores muy por debajo de supotencial científico y editorial, que vienecalculándose en todos los indicadores deproducción científica en torno al 3%.

Este problema, de por si preocupante, seagrava aún más cuando nos adentramos en elterreno de las Ciencias Jurídicas en el que larepresentatividad del WoS es aún menor ylos sesgos se acentúan. Así, de una poblaciónpotencial de revistas científicas españolas enCiencias Jurídicas que ronda las 300, en lasbases de datos de Thomson Reuters sólo fi-guran indizadas dos revistas españolas.

Si a esto unimos el hecho de que los há-bitos de publicación y de consumo de infor-mación de los científicos españoles de cien-cias jurídicas poseen un perfil singular, endonde priman los canales de comunicación

EMILIO DELGADO LÓPEZ-CÓZAR, RAFAEL RUIZ PÉREZ Y EVARISTO JIMÉNEZ CONTRERAS4

QUÉ ES Y CÓMO UTILIZAR EL ÍNDICE DE IMPACTO DE REVISTAS ESPAÑOLAS DE CIENCIAS JURÍDICAS

españoles, entenderemos la necesidad decrear sistemas de evaluación de publicacio-nes científicas de carácter nacional (Jiménezet al., 2008). Prácticamente la totalidad delos investigadores españoles de las cienciasjurídicas publican habitualmente sus traba-jos en revistas españolas, mientras que es es-caso el número de autores que publican enrevistas extranjeras. En la encuesta realizadapor Alcaín (2004) a los profesores españolesde ciencias jurídicas el 95% declaraban ha-ber publicado sus últimos tres trabajos en re-vistas españolas (Alcaín, 2004); sólo un 5%habían publicado en revistas extranjeras. Pa-recidas conclusiones arroja la encuesta diri-gida por Coderch et al. (2008) a profesoresde Derecho Civil y Mercantil y a una mues-tra de notarios, registradores de la propiedady becarios del Real Colegio de España enBolonia entre 1987 y 2001 sobre cuales sonlas revistas que consultan regularmente. Lasrevistas españolas acaparan abrumadora-mente las preferencias lectoras; la presenciade revistas extranjeras es testimonial.

Por otra parte, piénsese que mientras enlas bases de datos del ISOC, donde se indi-zan de forma más o menos exhaustiva laspublicaciones españolas, figuran 72.000 tra-bajos de ciencias jurídicas, en las bases dedatos del ISI solo aparecen 178 trabajos, re-presentan sólo el 6% de la producción cien-tífica española en Ciencias Sociales y Jurídi-cas del periodo 1980-2004. En consonanciacon estas prácticas los investigadores espa-ñoles de ciencias jurídicas citan más publi-caciones nacionales y valoran más positiva-mente la publicación en revistas españolas.

Por último, conviene recordar la propiaidiosincrasia de la investigación en CienciasJurídicas, cuyas investigaciones atraen fun-damentalmente la atención de los entornosdonde se producen. Su destino es el consu-mo de las comunidades científicas naciona-les ya que es una investigación muy influen-ciada por las peculiaridades culturales, don-de prima lo contextual, predominan los pro-blemas de corte local y se adopta una orien-tación aplicada.

La conclusión no puede ser más clara: lamejor manera de conocer la audiencia real

de la investigación española en su conjuntoes construir bases de datos con las referen-cias bibliográficas emitidas por los artículospublicados en las revistas españolas (Jimé-nez, Delgado, Moneda y Ruiz, 2008). Se tra-taría de crear una herramienta que, basadaen los mismos principios metodológicos quelos índices internacionales, sea un buen ins-trumento medir el impacto y la repercusióncientífica que tiene la investigación produci-da por españoles.

Es en este contexto en el que nace IN-RECJ (Índice de Impacto de Revistas Espa-ñolas de Ciencias Jurídicas), el producto cu-yas principales prestaciones reseñamos acontinuación.

Metodología: la confección de los índices de citas

La elaboración de IN-RECJ ha implicadola realización de las siguientes operaciones:

1. Identificación de la población de re-vistas científicas españolas especia-lizadas en ciencias jurídicas en cir-culación.

2. Distribución de revistas por discipli-nas y especialidades.

3. Selección de las revistas fuente (re-vistas citantes).

4. Desarrollo de la aplicación que so-portará el índice de impacto.

5. Carga de datos.6. Generación de indicadores.

Nos referiremos exclusivamente aquí alas tres primeras, que son las que más inte-rés poseen desde el punto de vista científico.

Identificación de la población de revistascientíficas españolas especializadas enciencias jurídicas en circulación

La primera tarea consistió en identificartodas las revistas científicas españolas vi-gentes publicadas en el área de Ciencias Ju-rídicas. En principio, se trataba de localizarexhaustivamente todas aquellas revistas quepueden calificarse de científicas, esto es, to-das aquellas que publican, con mayor o me-

5

nor abundancia, artículos de investigaciónoriginal, o sea, trabajos donde, empleandouna metodología científica contrastada, seaporten datos nuevos al conocimiento esta-blecido, independientemente de la calidad orelevancia que estos puedan tener. No sealude aquí, por tanto, a las publicaciones pe-riódicas de finalidad informativa, como bo-letines, anuarios, memorias, etc..., que, auncumpliendo una función muy importante pa-ra el buen desenvolvimiento de la prácticaprofesional, carecen de sentido desde elpunto de vista de la investigación, que es elámbito en el que se mueve este proyecto.

Para efectuar dicha tarea se han utilizadolos principales directorios nacionales e inter-nacionales especializados en el control de pu-blicaciones periódicas: Directorio de revistasde LATINDEX, Directorio Español de Revis-tas de Ciencias Sociales y Humanidades, Ul-richs Periodicals International Directory,DIALNET, Catálogo colectivo REBIUN.

Distribución de revistas por disciplinas y es-pecialidades

El siguiente paso ha consistido en la dis-tribución de las revistas según especialida-des, entendiendo por tales, las áreas de co-nocimiento en que se vertebra el Derecho deacuerdo con el catálogo de áreas de conoci-miento de las Universidades españolas.

Este punto es clave en el proceso se se-lección de revistas a incluir en el índice deimpacto. Un prerrequisito para una cons-trucción no sesgada, temáticamente hablan-do, del índice de impacto estriba en conse-guir que las principales especialidades y su-bespecialidades estén representadas en labase de datos. Por consiguiente, al menosuna revista especializada de cada área debe-ría figurar en el índice como revista fuente,esto es, revista de la cual se van a vaciar ín-tegramente todas las referencias bibliográfi-cas de los artículos de investigación que pu-bliquen.

Para realizar dicha tarea se utilizarondos procedimientos:

— Las clasificaciones temáticas que laspropias bases de datos consultadas

utilizan para categorizar las revistasque indizan. A saber: C.D.U. (Clasi-ficación Decimal Universal), Códi-gos de clasificación de la Unesco,Clasificación Dewey y clasificacióntemática Ulrich’s.

— El análisis de la citación emitida yrecibida por cada una de las revistasque conforman la base de datos.

Selección de las revistas fuente (revistas ci-tantes)

En principio, podría pensarse que un ín-dice del tipo que aquí se propone debiera cu-brir todas las revistas científicas publicadasen el área de interés del mismo. Este plante-amiento, sería no solo inviable por motivoseconómicos, sino innecesario, como diver-sos estudios bibliométricos han demostrado.Se ha comprobado que un número relativa-mente pequeño de revistas publica el núcleosustancial de los resultados científicos signi-ficativos, en cualquier campo de conoci-miento considerado. Este principio se cono-ce con el nombre de Ley Bradford, y se hacomprobado que se cumple estrictamente enel caso de las revistas españolas de cienciasjurídicas: sólo 40 revistas (el 20% de las 340revistas españolas de ciencias jurídicas)concentran el 80% de las citas. Pues bien,nuestro objetivo consistió en identificar esenúcleo de revistas. Como se ha demostradorepetidamente, controlando esa parcela derevistas, generalmente reducida, se puedeasegurar una altísima cobertura de las revis-tas y trabajos más influyentes o lo que es lomismo aquellas que contribuyen más activa-mente al progreso científico. Esta identifica-ción se ha realizado teniendo en cuenta lasdistintas subespecialidades en que se verte-bran las comunidades científicas españolasde Ciencias Jurídicas.

Para conseguirlo se emplearon tres crite-rios:

1. Pervivencia o antigüedad: sóloaquellas revistas que tuviesen unaantigüedad mínima de seis años yque hubiesen venido publicándosepuntualmente en dicho período. Es-



te criterio actúa como prerrequisitopara la entrada en la base de datos,esto es, aquella revista que no locumple queda automáticamente des-cartada.

2. Opinión de los investigadores espa-ñoles medida a través de encuestassobre la calidad percibida de las re-vistas de su especialidad. Se han uti-lizado los datos de las encuestasdesarrolladas por el CINDOC (Al-caín, 2004) entre profesores de uni-versidad adscritos a las áreas de co-nocimiento de ciencias jurídicas en2002, que catalogaron las revistasespañolas en función de su prestigioen cuatro categorías: A (Muy buena,fundamental para la disciplina), B(Buena, interesante para la discipli-na), C (de interés general), D (sin in-terés para la disciplina).

3. Impacto científico de las revistas es-pañolas de Ciencias Jurídicas. Se re-currió al trabajo del CINDOC (Al-caín, 2004) donde se computaron lascitas realizadas por una ampliamuestra de revistas españolas en eltranscurso del año 2003. En líneasgenerales los resultados de citaciónnacional señalan como las revistasmás citadas en España en cada espe-cialidad concuerdan básicamentecon las revistas mejor valoradas porlos investigadores.

Para determinar cual era el número idó-neo de revistas a procesar por área de cono-cimiento, se atendió al tamaño del campo(número de revistas de cada especialidad ynúmero de profesores por área). El total derevistas citantes definitivamente selecciona-das fue de 65, lo que representa el 19% deluniverso de revistas españolas de cienciasjurídicas. La distribución por áreas de cono-cimiento figura en la tabla 1.

Características y cifras

IN-RECJ queda configurado como un ín-dice bibliométrico que ofrece información es-tadística sobre el impacto científico de las re-vistas españolas de Ciencias Jurídicas, calcu-lado a partir del recuento de las citas biblio-gráficas emitidas por 65 revistas españolas delas siguientes especialidades: Derecho Admi-nistrativo, Civil y Mercantil, Constitucional,Eclesiástico, Financiero, Filosofía del Dere-cho, Internacional, Penal y Procesal, Trabajoy Derecho Romano e Historia del Derecho).

Conviene, no obstante, recalcar el carác-ter multidisciplinar de estos índices. IN-RECJ, se beneficia también las citas emiti-das por su producto homónimo IN-RECS(Índice de Impacto de las Revistas Españo-las de Ciencias Sociales) que procesa 159revistas de disciplinas como la Antropolo-gía, Biblioteconomía y DocumentaciónCiencia Política y de la Administración,Ciencias de la Comunicación, Economía,

7

Tabla 1. Relación de revistas citantes por disciplina en IN-RECJ.

Revistas fuente

MULTIDISCIPLINAR 3DERECHO ADMINISTRATIVO 8DERECHO CIVIL Y MERCANTIL 12DERECHO CONSTITUCIONAL 6DERECHO DEL TRABAJO Y DE LA SEGURIDAD SOCIAL 7DERECHO ECLESIÁSTICO 2DERECHO FINANCIERO Y TRIBUTARIO 6DERECHO INTERNACIONAL PÚBLICO Y PRIVADO 7DERECHO PENAL Y PROCESAL 10DERECHO ROMANO E HISTORIA DEL DERECHO 5FILOSOFIA DEL DERECHO 3Total 65

Educación, Geografía, Sociología, Psicolo-gía, Urbanismo).

Sólo una concepción amplia y abierta co-mo ésta permite calibrar la repercusión y lasrelaciones que mantienen entre sí las discipli-nas de Ciencias Sociales y Jurídicas. Las espe-cialidades no son compartimentos estanco yposeen fronteras muy borrosas por lo que exis-te una gran interacción entre las mismas; fenó-meno que queda de manifiesto cuando consta-tamos que por término medio el 40% de las ci-tas bibliográficas que recibe una especialidadprovienen de otra disciplina. De esta manerapodremos ver no sólo como un campo cientí-fico se ve así mismo sino que apreciaremos co-mo la ven el resto de áreas de conocimientodonde la especialidad cobra su pleno sentido.

En la actualidad los índices a partir de las223 revistas vaciadas (65 en Derecho), se cal-cula el impacto de 1.112 revistas, de las cua-les 340 son de Ciencias Jurídicas (Tabla 2).

Prestaciones

El índice bibliométrico diseñado permi-te obtener información detallada sobre la ci-tación de los siguientes agregados: revistas,artículos, autores e instituciones.

Revistas El objetivo con el que nacieron estos ín-

dices fue el de poder determinar cual es el im-pacto científico de una revista, su evolución ysu posición respecto al resto de las revistas dela especialidad. Pues bien esto se consiguebásicamente a través del índice de impacto,que se calcula con la misma fórmula y proce-dimiento que el factor de impacto (ImpactFactor) de Thomson Reuters. Ejemplo delcálculo empleado para el índice de 2006:

Citas2006FIy =

Artículos2005 + Artículos2004

A partir del índice de impacto de esteaño (2007) tomamos la decisión de reajustarla fórmula ampliando un año la ventana decitación, de manera que el índice de 2007haría referencia a los artículos publicados en2004, 2005 y 2006.

Ejemplo del cálculo a partir de 2007:

Citas2007FIy =

Artículos2006 + Artículos2005 + Artículos2004

Los motivos para tomar esta medida sonlos siguientes:

1. Los crónicos retrasos que sufren lasrevistas españolas a la hora de supublicación, que tienen como efectoinmediato la reducción de la ventanaefectiva de citación, en muchos ca-sos, a un solo año y no a dos comohabía previsto Garfield.

2. Por otra parte, la nueva fórmula seajusta mucho mejor a las dinámicasde citación–envejecimiento que sedan en Ciencias Sociales que, comoes sabido, son más lentas (es decir,las citas tardan más tiempo en pro-ducirse y concretarse) que las de lasCiencias Experimentales.

Estas limitaciones, debido a lo reducido delos valores observados venían afectando tantoa las cifras de citación como a la variabilidadde los resultados. En definitiva, creemos queesta medida acercará más los impactos a la fi-


Tabla 2. Las cifras de IN-RECS e IN-RECJ.

Total IN-RECS IN-RECJ

Periodo cubierto 1994- 2001-Revistas fuente 224 159 65Revistas con impacto calculado 1.112 772 340Artículos citables 267.040 199.735 67.305Citas 96.102 76.309 19.793


losofía original de la fórmula ideada por E.Garfield, dado que minimizará los efectos delretraso al que nos referíamos anteriormente yla ventana efectiva de citación será de dos añospara la mayor parte de las revistas.

Con dicho indicador se construyen loslistados anuales de impacto de las revistas(Figura 2). Se muestra las revistas ordenadas

según su impacto, marcando el cuartil al quepertenecen. Se acompaña este indicador conindicaciones precisas sobre el número detrabajos y el tipo de citas (nacionales: proce-dentes de revistas españolas o internaciona-les: procedentes de las bases de datos deThomson Reuters). Las revistas pueden or-denarse por cualquiera de estas variables.

9

Figura 1. Funcionamiento general de IN-RECJ.

Figura 2. Índice de impacto anual por especialidad.

Asimismo los impactos anuales se acom-pañan de dos impactos acumulativos (Figura3): uno que muestra el impacto del últimoquinquenio y otro que abarca desde el comien-zo de la base de datos (2001 para jurídicas).Con estos acumulados podemos apreciar deforma más ajustada la repercusión de las revis-tas, ya que conocido el lento envejecimientode la literatura científica de las ciencias jurídi-cas, al tomar periodos de tiempo más ampliose capta mucho mejor toda la potencialidad decitación de las revistas y se evitan las oscila-ciones anuales a que se ven sometidas comoconsecuencia del reducido tamaño de los da-tos. A fin de mejorar la precisión de los ran-kings se ofrecen otros indicadores bibliométri-cos que califican muy bien la relevancia deuna revista, como son: la ratio citas por artícu-lo que fija el promedio de citas del artículo tí-pico de cada revista, el porcentaje de artículoscitados respecto del total de artículos publica-dos y el número de artículos altamente citados.

Especialmente útil para los editores delas revistas y también para los autores curio-sos es la radiografía sobre todos los datos bi-bliométricos y de citación que afectan a unarevista y que son los siguientes (Figura 4):

— Triángulo de citación: sirve para co-nocer los cálculos en los que se ba-

san los índices de impacto: númerode trabajos publicados y de citas re-cibidas cada año.

— Evolución de la revista (cuartiles),con indicación de la proporción quesignifican sus autoreferencias (citasque la revista hace a ella misma) yautocitas (citas realizadas por un au-tor a un trabajo propio publicado enla revista) en el impacto final de larevista del número de autocitas.

— Curva de envejecimiento de la revis-ta comparado con el de la especiali-dad. Muestra los años en los que larevista va recibiendo las citas

— Revistas españolas citadas desde elcomienzo del índice.

— Artículos de las revistas españolasmás citados por la propia revista.

— Artículos más citados de la revista.— Especialidades citantes, excluidas

las autoreferencias, que permite co-nocer desde que disciplinas se reci-ben las citas.

— Instituciones citantes: institucionesde las que proceden las citas recibi-das por la revista.

— Autores citantes: relación de los au-tores que más citan a la revista vi-sualizada.


Figura 3. Índice de impacto acumulativo (1998-2008).


— Revistas citantes: relación de las re-vistas que más citan a la revista vi-sualizada.

— Artículos citantes: relación de losartículos que más citan a la revistavisualizada.

— Perfil bibliométrico: Se muestra unacomparación de la revista con la es-pecialidad respecto a los indicadoresbibliométricos ya señalados, aña-diendo el índice de coautoría.

Entendemos que a los editores de las re-vistas les proporciona información objetivasobre la influencia de su revista y de los artícu-los que publica así como, a través de un análi-sis de la citación, de las afinidades temáticascon otras publicaciones del sector. Ello servirápara delinear la política editorial: temas sobrelos que publicar, autores a los que atraer, etc.

ArtículosEn esta sección se puede acceder a un

listado de los 100 artículos más citados deuna especialidad (Figura 5), así como cuales

11

Figura 5. Lista de los 100 artículos más citados de las revistas españolas de una especialidad (1998-2008).

Figura 4. Datos de citación de una revista y evolución de su impacto.

son los autores, artículos y revistas que lescitan y que son citados por ellos mismos (6).

AutoresEn esta sección se ofrece un listado de

los autores más citados en las revistas espa-ñolas de ciencias jurídicas de cada especia-lidad. Los autores que figuran en los lista-dos se han limitado a aquellos que superanun umbral mínimo de citación. Dicho um-bral es variable según el tamaño y las prác-

ticas de citación y publicación de cada es-pecialidad: van desde 2 citas en Eclesiásti-co o Filosofía del Derecho a 5 citas en De-recho Administrativo o 10 en Derecho delTrabajo.

Los autores se encuentran ordenados se-gún el número de citas que han recibido enlas revistas de la especialidad. A fin de me-jorar la precisión de los rankings se ofrecenotros indicadores bibliométricos que califi-can muy bien la relevancia del autor:


Figura 6. Detalle de los artículos citantes de un artículo.

Figura 7. Lista de los autores más citados de las revistas españolas de una especialidad.


— Número de trabajos publicados enrevistas españolas, con mención es-pecífica de los publicados en revis-tas de la especialidad.

— Número total de citas diferenciandolas procedentes de revistas de la es-pecialidad, las citas nacionales (pro-cedentes de revistas españolas) o lasinternacionales (procedentes de lasbases de datos de Thomson Reuters).

— La ratio citas por artículo que fija elpromedio de citas del artículo típicode cada autor.

— El porcentaje de artículos citadosrespecto del total de artículos publi-cados.

— El número de artículos altamente ci-tados.

Las autores pueden ordenarse por cual-quiera de estos indicadores.

Por otra parte, y a fin de ofrecer un re-trato lo más fiel posible de la produccióncientífica de cada autor, se ofrece la siguien-te información:

— Relación de los trabajos publicadosen revistas españolas desde 1994con mención del número de citas re-cibidas.

— Relación de los coautores con losque publica con mención del núme-ro de trabajos publicados con cadauno de ellos.

— Relación de los autores más citadospor el autor con mención del núme-ro de citas emitidas hacia cada autor.

— Relación de los autores citantes conmención del número de citas recibi-das cada autor citante.

— Filiación institucional de los autorescon los que publica, filiación de losque cita (citados) y de los que le ci-tan (citantes) con mención del nú-mero de citas emitidas o recibidaspor cada una de las instituciones.

— Relación de las revistas en las que pu-blica, revistas que cita y que le citan.

— Relación de las especialidades en lasque publica, especialidades que citay que le citan.

— Años en los que publica, años quecita y que le citan.

— Perfil bibliométrico: Se muestra unacomparación del autor con la espe-cialidad respecto a los indicadoresbibliométricos ya señalados, aña-diendo el índice de coautoría, índiceH, número de colaboradores, núme-ro de autores citantes.

13

Figura 8. Detalles de los datos de citación de un autor.

InstitucionesEn esta sección se ofrece un listado de

las instituciones más citadas en las revistasespañolas de ciencias jurídicas de cada espe-cialidad. Al igual que en la sección anteriorlas instituciones que figuran en los listadosse han limitado a aquellas que superan unumbral mínimo de 5 publicaciones.

Se muestran las instituciones ordenadassegún el número total de citas recibidas.,aunque también pueden ordenarse por los si-guientes indicadores:

— Número de trabajos publicados enrevistas españolas desde 1994.

— Número total de citas diferenciandolas procedentes de revistas de la es-pecialidad, las citas nacionales (pro-cedentes de revistas españolas) o lasinternacionales (procedentes de lasbases de datos de Thomson Reu-ters).

— La ratio citas por artículo que fija elpromedio de citas del artículo típicode cada institución.

— El porcentaje de artículos citadosrespecto del total de artículos publi-cados.

— El número de artículos altamente ci-tados.

Por otra parte, y a fin de ofrecer un re-trato lo más fiel posible de la produccióncientífica de cada institución, se ofrece la si-guiente información:

— Relación de instituciones con lasque publica, a las que cita (citadas) ylas que le citan (citantes) con men-ción del número de citas emitidas orecibidas por cada una de las institu-ciones.

— Relación de los trabajos publicadospor la institución más citados en lasrevistas españolas de ciencias jurídi-cas desde 1994.

— Relación de los trabajos más citadospor la institución en las revistas es-pañolas de ciencias jurídicas desde1994.

— Relación de los trabajos publicadospor la institución más citados en lasrevistas españolas de ciencias jurídi-cas desde 1994.

— Relación de las revistas en las quepublica la institución, revistas quecita y que le citan.

— Años en los que publica la institu-ción, años que cita y que le citan.

— Perfil bibliométrico: Se muestra unacomparación de la institucióncon la


Figura 9. Lista de las instituciones más citadas en las revistas españolas de una especialidad.


especialidad respecto a los indicado-res bibliométricos ya señalados,añadiendo el índice de coautoría.

Búsquedas

Para buscar información adicional enlos índices de citas se ha diseñado una pan-talla de búsquedas a la que se puede accederdesde la pantalla principal y desde las venta-nas de cada especialidad. Se pueden efectuarbúsquedas por autor, institución, revista ypor citas bibliográficas.

Sólo nos resta desear que esta herra-mienta sea útil para todos aquellos para losque se ha diseñado (investigadores, editoresy directores de revistas españolas, bibliote-carios y gestores, administradores y respon-sables de agencias de evaluación científica)así como solicitar encarecidamente el apoyoy colaboración de todos ellos para con estainiciativa, que esperemos no sea flor de undía y alcance la continuidad que obras de es-ta naturaleza precisan para desplegar todassus potencialidades.

15

Figura 10. Detalles de los datos de citación de una institución.

Figura 11. Pantalla de búsqueda de IN-RECJ.

Alcaín, M.D. (2004). Análisis de las citas dadaspor las revistas españolas de derecho y pe-riodismo a partir de las revistas mejor valo-radas por los pares. Elaboración de un índi-ce de citas de las revistas españolas de todaslas disciplinas de Ciencias Sociales. Madrid:CINDOC.

ANECA (2005). Resolución de 18 de febrero de2005, de la Dirección General de Universida-des, por la que se modifican determinados as-pectos del procedimiento de presentación desolicitudes de evaluación o informe de laAgencia Nacional de Evaluación de la Cali-dad y Acreditación para la contratación depersonal docente e investigador, así como loscriterios de evaluación, establecidos en lasResoluciones de 17 de octubre de 2002 y de24 de junio de 2003, de la Dirección Generalde Universidades. Boletín Oficial del Estado,Viernes 4 Marzo 2005, 54: 7875-7887.

ANEP (2006). Ministerio de Educación y Cien-cia. Criterios en la evaluación del mérito tec-nológico: curricula, proyectos y entidades.Madrid: Secretaría General Técnica, Ministe-rio de Educación y Ciencia.

Bordons, M. y Zulueta, M.A. (1999). Evaluaciónde la actividad científica a través de indicado-res bibliométricos. Revista Española de Car-diología, 52, 790-800.

Buela-Casal, G. (2010). Índices de impacto de lasrevistas científicas e indicadores para medirel rendimiento de los investigadores. Revistade Psicodidáctica, 15, 3-19.

CNEAI (2005). Resolución de 25 de octubre de2005, de la Presidencia de la Comisión Na-cional Evaluadora de la Actividad Investiga-dora, por la que se establecen los criterios es-pecíficos en cada uno de los campos de eva-luación. Boletín Oficial del Estado, Lunes 7noviembre 2005, 266: 36470-36476.

Jiménez Contreras, E., Delgado López-Cózar, E.,Moneda Corrochano, M. y Ruiz Pérez, R.(2008, septiembre). The impact of spanish so-cial sciences as seen through the spanish rese-arch Journals. Comunicación presentada en la10th International Conference on Science andTechnology Indicators. Viena (Austria).

Jiménez Contreras, E. Moya Anegón, F. y Delga-do López-Cózar, E. (2003). The evolution ofresearch activity in Spain. The impact of theNational Commission for the Evaluation ofResearch Activity (CNEAI). Research Po-licy, 32, 123-142.

Jiménez Contreras, E., Delgado López-Cózar, E.,Ruiz Pérez, R. y Fernández Víctor, M.(2002). Impact-factor rewards affect spanishresearch. Nature, 417, 898.

Rodríguez Yunta, L. (2010, abril). Las revistasiberoamericanas en Web of Science y Sco-pus: visibilidad internacional e indicadoresde calidad. Comunicación presentada en elVII Seminario Hispano-Mexicano de Investi-gación en Bibliotecología y Documentación.Ciudad de México (México). Accesible enhttp://eprints.rclis.org/18343/.

Ruiz Pérez, R., Jiménez Contreras, E. y DelgadoLópez-Cózar, E. (2008). Complementos bi-bliométricos de Thomsom Scientific en laWeb: buenos, bonitos y gratuitos. El Profe-sional de la Información, 17, 553-557.

Salvador Coderch, P., Azagra Malo, A. y GómezLigüerre, C. (2008). Criterios de evaluación dela actividad investigadora en derecho civil, de-recho privado y análisis del derecho. Indret:Revista para el Análisis del Derecho, 2.

Valderrama Zurián, J.C., González Alcaide, G. yAleixandre Benavent, R. (2007). El factor deimpacto de las revistas científicas: limitacio-nes e indicadores alternativos. El Profesionalde la Información, 16, 4-12.


Referencias

Documents

Qué es y cómo utilizar el Índice de Impacto de Revistas ...ec3/publicaciones/INRECJS_Aula_Abierta.pdf · trumento medir el impacto y la repercusión científica que tiene la investigación