Acceso y evaluación a la actividad científica

Master Universitario de investigación en tecnologías

industriales y de telecomunicación

Master Universitario de investigación en tecnologías

industriales y de telecomunicación

Enrique PerdigueroProfesor Titular de Hª de la Ciencia

Guión de las sesiones• El proceso de búsqueda de información• La evaluación de la actividad científica• Fuentes de información: bases de datos e

Internet• Bases de datos de interés

– ICYT (Índice Español de Ciencia y Tecnología)– Web of Knowledge (productos del antiguo Instititute

for Scientific Information) – Google Académico– Scopus (Elsevier)– SCImago– IEEE Xplore

Definir la cuestión

Seleccionar la fuente de información

Formular los perfiles de búsqueda

Llevar a cabo la búsqueda

Evaluar los resultados

Obtener los documentos primarios Evaluación de la calidad de la

actividad científica

El proceso de búsqueda de información

Elegir la fuente de información

¿Qué nos interesa saber de una base de datos?

• Cobertura: ¿Qué tipos de documentos forman parte de su

universo documental?• Si tiene un vocabulario

controlado• ¿Cómo es el entorno de

usuario?

¿Qué es un vocabulario controlado?

• Es una potente herramienta documental que evita que aparezcan en una base de datos los problemas del lenguaje natural

• A cada concepto se le asigna un solo término (de un glosario de términos permitidos, evitando sinonimias, polisemias, etc.

• Ninguna de las bases de datos que vamos a utilizar tiene vocabulario controlado. Resulta muy caro. Hay que analizar documento primario a documento primario y adjuntarle varios de los términos permitidos, de tal modo que el documentos quede bien descrito

• Hay elementos de política científica que precisan la evaluación de la actividad científica (los vamos a dejar de lado?

• Puesto que hay muchísima información nos interesa saber cual es la que tiene más

calidad• Para ello debemos acercarnos a los métodos

que se han utilizado para estudiar y medir el funcionamiento de la propia ciencia:

CIENCIOMETRÍA

Evaluación de la Actividad Científica

Cienciometría

Su finalidad es identificar las leyes y las regularidades

que rigen la actividad científica considerada en su

globalidad, aplicando a la ciencia los métodos de la

ciencia

Cienciometría

• Análisis cuantitativo de la actividad de investigación científica y técnica.

• Debería estudiar tanto los recursos y los resultados como las formas de organización en la producción de los conocimientos y técnicas

• Se ha ocupado sobre todo del análisis de los documentos redactados por los investigadores y los tecnólogos

BibliometríaEs la aplicación de métodos

estadísticos y matemáticos al estudio de la ciencia con el fin de definir los

procesos de la comunicación escrita y la naturaleza y desarrollo de las

disciplinas científicas, mediante el recuento y análisis de las distintas

facetas de dicha comunicación

Análisis bibliométrico• Estudio de las dimensiones, el crecimiento y de la distribución de

los documentos científicos• Indagación de la estructura y de

la dinámica de los grupos que producen y consumen estos

documentos y de la información que contienen

Análisis del crecimiento y del envejecimiento de la literatura científica

• La forma normal del crecimiento de la información científica es la exponencial

• La contemporaneidad es la característica fundamental de la ciencia (La ciencia actual supone el 96% del conjunto de la ciencia en todas las épocas)

• Obsolescencia

Concepto de semiperiodo• Permite medir el envejecimiento, la

obsolescencia de la información científica• Semiperiodo: tiempo durante el que se

publicó le mitad de la literatura activa circulante

• Tipo de literatura según el grado de envejecimiento:– con un fuerte componente de literatura clásica

(matemáticas, geología, botánica)– literatura efímera (física o ingeniería)– de carácter intermedio (fisiología y química)

Ley de Lotkasobre la distribución de los autores

según el número de sus trabajos publicados

Con independencia de la disciplina científica el número de autores que publican n trabajos es inversamente proporcional

a n2

A(n)= A(1)/n2

• Donde:• An es el número de autores con n trabajos• A1 es el número de autores con 1 trabajo• n2 Es el número de trabajos al cuadrado

Según la publicación de trabajos sobre un tema dado

• Autores transeuntes: con uno o muy pocos trabajos sobre un tema

• Productores medios : Autores con algunos trabajos sobre un tema

• Grandes productores: Autores con muchos trabajos sobre un tema, en el que son verdaderamente especialistas

Indicadores directos de la calidad de la actividad científica

• El único es la revisión por pares– Así se deciden que artículos se publican

en las revistas– También mediante este método se decide

la concesión de proyectos de investigación

– Es el criterio utilizado en algunas áreas de la Comisión de Evaluación de la Actividad Investigadora

– También lo es, en cierta medida, en las acreditaciones que lleva a cabo la ANECA

Indicadores indirectos de la actividad científica

• Se dispone de indicadores indirectos de la calidad científica que no pueden suplir las opiniones de los expertos que es el único medio de contrastar realmente la calidad

• La productividad, por ejemplo,-que se calcula dividiendo el número de trabajos por unidad de tiempo-, no supone necesariamente un indicador de calidad. No siempre el autor más productivo tiene que ser el mejor

Son indicadores indirectos de la actividad científica:

• número y distribución de las publicaciones (temas, grupos, países, instituciones)

• productividad de los autores• colaboración en las

publicaciones (índice de firmas por trabajo)

Son indicadores indirectos de la actividad científica:

• Impacto de las fuentes

–Factor de impacto de las revistas

– Índice de inmediatez de las revistas– Influencia de la revistas

• Asociaciones temáticas

Factor de impacto

• Medida de la repercusión o impacto de una revista científica en el resto de la comunidad científica

• Para un año se calcula mediante el cociente entre el numero de citas que han recibido en ese año los artículos de una revista dada publicados en los dos años anteriores y el número de artículos publicados por la revista en ese mismo periodo de tiempo

Factor de impacto de una revista para el año 2009

nº de citas recibidas por la revista en 2008 y 2009

FI2009 = ------------------------------------------------nº de artículos publicados por las revista en 2008 y 2009

El factor de impacto es un númerosin sentido si no se tienen en

cuenta:

• Es un indicador relativo, que no debe aplicarse para comparar revistas, grupos o autores de disciplinas distintas

• Ignora el debate en torno a las funciones de las citas en la comunicación científico-técnica

• Desconoce las limitaciones de los Citation Index: extremado sesgo, lagunas y errores

Uso y abuso del factor de impacto

• http://www.ceers.org/ijest/issues/full/v1/n1/101001.pdf

• Los mismos creadores del factor de impacto recomendaron desde el principio que no se utilizara para decidir las contratación de científicos y tecnólogos

• Sin embargo, en los últimos años, y especialmente en nuestro país se ha caido en la IMPACTOLATRÍA

El “factor de impacto acumulado”

El “factor de impacto acumulado”

• No existe como el sumatorio de todos los artículos publicados por un autor o una institución

• Existe el factor de impacto acumulado como la suma del factor de impacto de una misma revista a lo largo de un determinado número de años partido por el número de años considerados

El índice de Hirsch• Un científico tiene índice h si el h de sus Np trabajos

recibe al menos h citas cada uno, y los otros (Np -h) trabajos tienen como máximo h citas cada uno.

• En otras palabras, un científico tiene índice h si ha publicado h trabajos con al menos h citas cada uno. Así, el índice h es el balance entre el número de publicaciones y las citas a éstas. El índice fue diseñado para medir eficazmente la calidad del investigador, a diferencia de sistemas de medición más sencillos que cuentan citas o publicaciones, diferenciando a aquéllos investigadores con gran influencia en el mundo científico de aquéllos que simplemente publican muchos trabajos. El índice funciona eficazmente sólo entre científicos del mismo campo, pues las convenciones de citación difieren entre cada uno de éstos.

El índice de Hirsch• En otras palabras, un científico tiene índice h

si ha publicado h trabajos con al menos h citas cada uno. Así, el índice h es el balance entre el número de publicaciones y las citas a éstas. El índice fue diseñado para medir eficazmente la calidad del investigador, a diferencia de sistemas de medición más sencillos que cuentan citas o publicaciones, diferenciando a aquéllos investigadores con gran influencia en el mundo científico de aquéllos que simplemente publican muchos trabajos. El índice funciona eficazmente sólo entre científicos del mismo campo, pues las convenciones de citación difieren entre cada uno de éstos.