Un programa nacional de

Información y los indicadores de producción e

impacto

Anna María PratCONICYT-Chile

Informar resultadosSometer ideas y resultados al juicio de paresAsegurar la prioridad del descubrimientoAcumular conocimiento para usos futuros

La Comunicación Científica

La culminación de un proceso De investigación, De discusión, De financiamiento, De evaluación por pares

El inicio de un proceso De premios y sanciones, De búsqueda de visibilidad, De permanencia

Producto de las actividades de investigación

El objetivo básico de la actividad de investigación es la creación de nuevo conocimiento o de nuevos productos y servicios. El "producto" (output) de la actividad, adquiere diferentes formas y varía según cada disciplina: Artículos en revistas científicas, libros,

presentaciones a congresos, y todo tipo de publicaciones en general.

Patentes y otros productos relacionados con la posibilidad de aplicación y transferencia del conocimiento

Según la disciplina, diseños, desarrollo de software, material multimedia, y otros.

El producto de la actividad es, generalmente, cuantificable.

Resultados de las actividades de investigación

Además de los productos cuantificables, existen lo que se denomina "resultados" o "efectos" (outcomes) de la investigación: Producción de graduados de alta calidad Innovaciones tecnológicas Ampliación de la capacidad de servicios de

consultoría, servicios de investigación a contrata Relaciones internacionales con potencialidad de

intercambio, acceso a resultados, participación en redes, etc.

Es difícilmente cuantificable, requiere definir criterios de medición y evaluación

¿Qué se mide al evaluar resultados de I+D?

Producción. Número de publicaciones individuales o de un grupo de investigaciónProductividad. Número de publicaciones según la capacidad de investigación del grupo (generalmente relación con el número de JCE dedicadas a investigación, o cantidad de recursos invertidos)Impacto. Número de veces que un trabajo es citado en las revistas incluidas en el WoS del ISI. Impacto NO es equivalente a calidad.

Consideraciones para la selección de bases y criterios

Tipos de literatura y otros productos a considerar, según cada disciplinaEvaluación de la base de información sobre la cual trabajar. WoS, Bases nacionales reconocidas, ¿otras según área disciplinaria?Complementación de los indicadores bibliométricos con otros indicadores de I+D nacionales e internacionalesLa perspectiva, nacional, disciplinaria e institucional

La corriente principal

Hoy se publican, en todo el mundo, más de 200.000 revistas de carácter científico.Aplicando la Ley de Bradford: 150 revistas dan cuenta de la mitad de lo que se cita y un cuarto de lo que se publicaUn núcleo de aproximadamente 2000 revistas cubren el 85% de los artículos publicados y un 95% de los artículos citadosHoy se considera “corriente principal” las revistas incluidas en bases de datos de ISI

Contenido de ISI

Número aproximado, por año, de títulos en las bases de datos de ISI: Science Citation Index Expanded: 5.600 Social Science Citation Index: 1.800 Arts & Humanities Citation Index: 1.200

Número aproximado de la llamada "corriente principal" en todas las áreas: 8.700Anualmente se revisan más de 2000 títulos para ser incorporados y se revisan los existentes para ser borrados

Elementos para evaluación

Cumplimiento de la periodicidadCumplimiento de normas editoriales internacionales que aseguren su recuperación: Título informativo de la revista Títulos, resúmenes y palabras clave de los

artículos en inglés además de su idioma original

Referencias completas Identificación de los autores y su filiación Procesos de revisión por pares

Elementos para la evaluación

Alcance del tema y cobertura geográfica de la revistaEvaluación de las citas recibidas por la revista, sus autores y los miembros del comité editorial: Número de artículos, impacto e inmediatezRelación de autocitasDisponibilidadLas revistas a ser incluidas son “observadas” por períodos de 2 a 3 años

Revistas Latinoamericanas en ISI

4Venezuela

1Uruguay

47Mexico

1Ecuador

1Cuba

1Costa Rica

1Colombia

317Chile

218Brasil

15Argentina

A&HCISSCISCIPaís

¿Para qué entrar al ISI?

Prestigio. Entrar al club exclusivo de la "corriente principal"Calidad reconocida internacionalmente (aunque se sabe que no todas las publicaciones de calidad están incorporadas)Medida de calidad usada en sistemas de evaluación a nivel nacional e internacional

¿Cómo se comunica en Chile?

En las ciencias exactas casi exclusivamente en revistas de corriente principalEn las ciencias naturales a través de revistas de corriente principal y revistas nacionalesEn las ciencias aplicadas, mayoritariamente a través de revistas nacionalesEn las ciencias sociales y humanas, casi exclusivamente en revistas nacionales

El porqué de una Revista en Chile

Dar a conocer resultados de investigación en un área o disciplina determinadaApoyar la docencia y la difusión de conoci-miento en áreas determinadasDifundir el quehacer de una unidad académicaPublicar trabajos no aceptados en otras revistas de mayor calidadServir de moneda de canje para obtener otras publicaciones similares

Algunos problemas para publicar en el país

Editores de buena voluntadNúmero de autores para lograr una periodicidad mínima permanentePocos controles de calidad estrictos (comités editoriales que funcionen, sistemas de evaluación por pares)Financiamiento estableTirajeDistribución y sus costosAlmacenamiento

La realidad de las revistas científicas nacionales

En el país se publican aproximadamente 500 revistas "académicas", de las cuales un buen numero pueden ser consideradas buenasAlgunas, en la actualidad 11, están incorporadas en la "corriente principal"Otras, a pesar de su calidad, nunca serán incorporadas debido a diferentes circunstanciasMuchas luchan por sobrevivirAlgunas deberían desaparecer

Algunas consideraciones

En muchos casos solo se consideran las publicaciones en revistas de corriente principal para la evaluaciónEn muchas áreas del conocimiento necesitamos buenas revistas nacionalesNecesitamos sistemas rigurosos para medir la calidad de éstas publicacionesEs necesario fomentar políticas de edición en las universidades, sociedades científicas y otras instituciones de investigaciónDeberíamos tener menos revistas, pero de calidad, y éstas necesitan apoyo

Objetivos de la política nacional de edición científica

Mantener publicaciones nacionales en áreas específicasMantener un alto nivel de calidad en las publicaciones nacionalesPromover su visibilidad en la comunidad científica internacionalGenerar indicadores de producción complementarios a ISI. Una "corriente principal nacional"Apoyar el libre acceso a la información producida a nivel nacional. "Open Access"

Programas para el fomento de la edición científica

Fondo Nacional de Edición CientíficaTalleres para editores científicosRed Internacional del ISSN y Base de Datos nacional de publicaciones seriadasParticipación en Latindex. Indice y Catálogo Participación en SciELO. Red Regional de Revistas Científicas ElectrónicasPautas nacionales para la evaluación de publicaciones. Normas nacionales para publicaciones en serie y difusión de las internacionales

Programa de edición electrónica

Iniciado en 1998. Incluyó dos líneas: Programa piloto para edición electrónica de

una revista científica de alta calidad sólo en formato electrónico: Electronic Journal of Biotechnology. P. Universidad Católica de Valparaíso. El 2001 fue incorporada a ISI.

Creación de una biblioteca científica electrónica traspasando a formato electrónico revistas de alta calidad existentes en papel. Se adopta metodología SciELO

Programa de edición electrónica

SciELO-Chile se inicia en 1999 con la plataforma y metodología de BIREME-FAPESPPrincipales objetivos: Facilitar la visibilidad y accesibilidad de las

revistas chilenas Definir normas y criterios de evaluación para

posicionar SciELO como medida de calidad Ayudar a definir políticas editoriales en

universidades, instituciones de investigación y sociedades científicas

Comprometerse con la iniciativa "Open Access"

SciELO-Chile

En la actualidad: 45 revistas texto completo (muchas a partir de

1997) Más de 7.600 artículos y 500 números 600.000 visitas mensuales 4 nuevas revistas chilenas incorporadas a ISI

Aceptado como herramienta de medicion para el Aporte Fiscal a las universidadesSe inició la transferencia de la plataforma a las universidades para la edición de sus propias publicaciones

¿Qué sucede hoy en el mundo?

Monopolio y alto costo de las publicaciones científicasNuevas tecnologías disponiblesNuevas formas de comunicación Iniciativa de “acceso abierto” , Open Acces:

Archivos de pre impresos Revistas de acceso gratuito, bancos de publicaciones, etc.

Nuevas formas de evaluación y definición de "revista científica" Royal Society ICSU, AAAS, UNESCO

CONICYT y las muchas dimensiones de la información

La información científica como insumo de la investigación y desarrolloLa comunicación científica como resultado de la actividad de I+DLa información científica como base de estudios y análisis de tendencias de la I+DLa información como indicador de la actividad de I+D para orientar las políticas nacionales

Un programa nacional de información

Que asegure el acceso a la información científica mundial, en forma equitativa, a todos los grupos de investigación del paísQue muestre la información generada en Chile, dé visibilidad a las revistas nacionales y las vincule con el resto del mundoQue permita conocer, valorar y medir la actividad científica nacional y mejorar los procesos de gestiónQue aplique tecnologías emergentes para llevar a cabo análisis más complejos sobre la producción científica nacional

Componentes del sistema de información científica.

Acceso a la información

científica internacional

CINCEL

Acceso a la información

nacional

SciELO

Acceso a la información del sistema chileno

de C&T

SICTI

OBSERVATORIO DE CYT

Medición y evaluación del sistema

El acceso a la información internacional

Creación de CINCEL, Consorcio para la adquisición de información científica electrónica. Participan 25 universidades con aporte fiscal y se ampliará próximamente a las privadas.Primera fase: Suscripción conjunta del Web of Science de ISISegunda fase definición de un Programa Nacional de Acceso con tres subprogramas: Estudios de colecciones base, adquisición de textos completos, entrenamiento. Proyecto aprobado para este año.

El porqué del Web of Science

Base de datos altamente selectiva con características de búsqueda propiasDe muy alto costo. Ninguna institución, por sí sola podía suscribirlaIndispensable para estudios de producción y productividad. Base de cálculo del Aporte Fiscal a las universidadesBase de producción de indicadores para la carrera docente en muchas instituciones

El acceso y visibilidad de la información generada en Chile

Programa SciELO Chile para la edición electrónica de revistas científicas publicadas en el país Actualmente 45 revistas a texto completo, la mayoría desde 1997 hasta la fecha Programa de identificación y evaluación permanente de las revistas nacionalesSistema propio de indicadores para medir producción, impacto, co autoríasBase de datos incorporada

Criterios de evaluación

Aspectos formales (basado en Latindex) Características básicas Características de presentación de la revista Características de gestión y política editorial Características de los contenidos

Evaluación de contenido por pares Últimos dos años de la revista Se envía a tres especialistas

Evaluación permanente de la calidad. Medición de visitas, citas e impacto

SciELO y los indicadores

SciELO incluye un módulo de estadísticas: De Uso (de las revistas y de cada artículo) De citas (Impacto, vida media) De Coautoría (a nivel nacional, regional e

internacional)

Indicador de artículos y citas por instituciones y autoresDesde el año 2002 considerado, junto a ISI, medida de calidad de revistas chilenasSe está transfiriendo a las universidades para la edición de sus publicaciones y mejorar red de información

Los enlaces

Están activos: Enlaces entre artículos SciELO, currículos SICTI

en Chile y Lattes de Brasil, entre referencias de artículos en SciELO Chile y SciELO Brasil, entre las referencias y bases de datos Medline y Lilacs

Están previstos De currículos SICTI y SciELO a Web of Science de

ISI De publicaciones a textos completos y otras

bases de datos secundarias, tales como CABIAcceso desde INIST/CNRS, Francia y OCLC, EE.UU

Algunos enlaces

De SciELO Chile a Currículo SICTI

Algunos enlaces

De SciELO Chile a Currículo en Brasil

Algunos enlaces

Entre artículos SciELO Chile

Algunos enlaces

De SciELO Chile a SciELO Brasil

Algunos enlaces

De SciELO Chile a Medline y LILACS

Información sobre el sistema nacional de CyT

SICTI, Sistema de información de ciencia, tecnología e innovación..Plataforma que comprende información de : Currículos de personas relacionadas con

programas de CTI Proyectos de investigación y desarrollo Instituciones científicas Productos (publicaciones, patentes y otros)

Portal de Ciencia y Tecnología Nacional

Información sobre el sistema nacional de CyT

Módulos de apoyo a la gestión de CONICYT Incluye: Un sistema de postulación en línea a los fondos

y programas que administra la institución, • Un sistema de apoyo a la evaluación,

seguimiento, control y término de los proyectos y programas.

• Posibilidad de acceso a la información en cada una de las etapas.

Plataforma transferible a las universidades para facilitar su propia gestión

Observatorio de Ciencia y Tecnología

Nuevo proyecto desarrollado dentro del Programa Bicentenario de Ciencia y Tecnología, Basado en la información producida y acumulada en el Programa Nacional y sus tres componentesAplicación de nuevas tecnologías de información para la obtención de indicadores y realización de estudios de prospectiva y vigilancia tecnológica (Colexis y Stanalyst)

Observatorio de Ciencia y Tecnología

Objetivos: Producción de indicadores básicos de ciencia,

tecnología e innovación, Indicadores de Producción. Nuevos indicadores

de “productos” (outputs), y de “efectos” (outcomes) de I+D, utilizando las bases de datos existentes y nuevas tecnologías

Generar una infraestructura tecnológica de soporte.

Llevar a cabo estudios sobre el estado de la CyT en el país

Los indicadores de producción hoy

Producción: Web of Science: Artículos semanales, anuales SciELO: Artículos en períodos de un año A nivel de personas, instituciones, disciplinas

Productividad Numero de artículos, por aportes del estado,

por proyectos, número de investigadores, etc. A nivel de personas, instituciones y disciplinas

Impacto Journal Citation Reports de ISI. Impacto de las

revistas, año a año WoS. Indice de impacto a nivel individual

Algunas conclusiones

Estamos invirtiendo, proporcionalmente, mucho en I+DNuestra ciencia no puede seguir siendo una “ciencia oculta”Debemos fomentar lo que se publica en el país para que tenga la mayor calidad científica y la mayor visibilidad posibleDebemos ayudarnos entre los países para mostrar la ciencia latinoamericana al mundo