28
Sistemas de evaluaci Sistemas de evaluaci ó ó n en Ciencias Sociales y Humanas n en Ciencias Sociales y Humanas vigentes en Espa vigentes en Espa ñ ñ a a Elea Elea Gim Gim é é nez nez Toledo Toledo Grupo de investigaci Grupo de investigaci ó ó n de evaluaci n de evaluaci ó ó n de publicaciones cient n de publicaciones cient í í ficas ficas Instituto de Estudios Documentales sobre Ciencia y Tecnolog Instituto de Estudios Documentales sobre Ciencia y Tecnolog í í a (IEDCYT) a (IEDCYT) Centro de Ciencias Humanas y Sociales (CCHS) Centro de Ciencias Humanas y Sociales (CCHS) Consejo Superior de Investigaciones Cient Consejo Superior de Investigaciones Cient í í ficas (CSIC) ficas (CSIC) Universidad Complutense de Madrid Universidad Complutense de Madrid Facultad de Filolog Facultad de Filolog í í a a Madrid, 4 de junio de 2008 Madrid, 4 de junio de 2008 Plataformas de evaluaci Plataformas de evaluaci ó ó n de revistas espa n de revistas espa ñ ñ olas olas

Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

  • Upload
    others

  • View
    5

  • Download
    0

Embed Size (px)

Citation preview

Page 1: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

Sistemas de evaluaciSistemas de evaluacióón en Ciencias Sociales y Humanas n en Ciencias Sociales y Humanas vigentes en Espavigentes en Españñaa

EleaElea GimGimééneznez ToledoToledoGrupo de investigaciGrupo de investigacióón de evaluacin de evaluacióón de publicaciones cientn de publicaciones cientííficasficas

Instituto de Estudios Documentales sobre Ciencia y TecnologInstituto de Estudios Documentales sobre Ciencia y Tecnologíía (IEDCYT)a (IEDCYT)Centro de Ciencias Humanas y Sociales (CCHS)Centro de Ciencias Humanas y Sociales (CCHS)

Consejo Superior de Investigaciones CientConsejo Superior de Investigaciones Cientííficas (CSIC)ficas (CSIC)

Universidad Complutense de MadridUniversidad Complutense de MadridFacultad de FilologFacultad de Filologííaa

Madrid, 4 de junio de 2008Madrid, 4 de junio de 2008

Plataformas de evaluaciPlataformas de evaluacióón de revistas espan de revistas españñolasolas

Page 2: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

Breve referencia a los sistemas internacionalesBreve referencia a los sistemas internacionales

Web Web ofof ScienceScienceArtsArts & & HumanitiesHumanities CitationCitation IndexIndex (n(nºº de citas del artde citas del artíículo)culo)

Social Social SciencesSciences CitationCitation IndexIndex (n(nºº de citas del artde citas del artíículo)culo)

JournalJournal CitationCitation ReportReport (JCR) (JCR) (factor de impacto, posici(factor de impacto, posicióón en el n en el áárea)rea)

ScopusScopus

Page 3: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

ISI Web ISI Web ofof KnowledgeKnowledge: : httphttp://://www.accesowok.fecyt.eswww.accesowok.fecyt.es

Page 4: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

Social Social SciencesSciences CitationCitation IndexIndex

Page 5: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

1700 revistas (frente a las 5900 de C y T)

ISI Web ISI Web ofof KnowledgeKnowledgeJournalJournal CitationCitation ReportReport

Page 6: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

ISI Web ISI Web ofof KnowledgeKnowledgeJournalJournal CitationCitation ReportReport

Page 7: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

ISI Web ISI Web ofof KnowledgeKnowledgeJournalJournal CitationCitation ReportReport

Page 8: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

No recoge revistas de Ciencias Humanas

ScopusScopus: : httphttp://://www.scopus.comwww.scopus.com

Page 9: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

ScopusScopus: : httphttp://://www.scopus.comwww.scopus.com

Cited by

Page 10: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

Plataformas de evaluaciPlataformas de evaluacióón de revistasn de revistas

Universidad de Granada Universidad de Granada ININ--RECS (RECS (http://ec3.ugr.es/inhttp://ec3.ugr.es/in--recs/recs/))

Universidad de BarcelonaUniversidad de BarcelonaMIAR (MIAR (http://bd.ub.es/miar/buscar.phphttp://bd.ub.es/miar/buscar.php))

Grupo Grupo ScimagoScimagoSJRSJR ((http://http://www.scimagojr.comwww.scimagojr.com) )

Centro de Ciencias Humanas y Sociales. IEDCYTCentro de Ciencias Humanas y Sociales. IEDCYTDICE (DICE (httphttp://://dice.cindoc.csic.esdice.cindoc.csic.es))RESH (RESH (httphttp://://resh.cindoc.csic.esresh.cindoc.csic.es))

Page 11: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

ININ--RECS e INRECS e IN--RECJRECJ

Basadas en el factor de impacto ISIBasadas en el factor de impacto ISIAplicado a revistas espaAplicado a revistas españñolas de Ciencias Sociales y Jurolas de Ciencias Sociales y Juríídicasdicas

Page 12: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

ININ--RECSRECS

Ranking por factor de impactoRanking por factor de impactoPosicionamiento en Posicionamiento en cuartilescuartiles Ej. Geografía

Page 13: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

ININ--RECSRECS

100 artículos más citados (por área)

Autores más citados

Instituciones más citadas

Page 14: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

MIARMIARAplicado a revistas espaAplicado a revistas españñolas y extranjeras de olas y extranjeras de Ciencias Sociales y HumanidadesCiencias Sociales y HumanidadesBasado en un indicador de difusiBasado en un indicador de difusióón de la revista en n de la revista en bases de datos: ICDSbases de datos: ICDS

Page 15: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

MIARMIAR

Page 16: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

MIARMIAR

Page 17: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

ScimagoScimago JournalJournal RankRank

Page 18: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

ScimagoScimago JournalJournal RankRank

SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de las revistas contenidas en Scopus desde 1999 hasta 2006” (Scimago, 2007)

Page 19: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

DICEDICEHerramienta creada para la ANECA

Es empleada por evaluadores, investigadores y editores

Incorpora criterios de calidad “objetivos”

Page 20: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

Informes individualizados por revistas

Page 21: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

Listados de revistas por áreas

Page 22: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

DICEDICE

Valoración de los profesores e

investigadores

+

Índice de impacto medio

+

Pesos específicos para cada indicador

RANKING

RESHRESH

Page 23: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

20 años o más = 10 puntosde 10 a 19 años = 5 puntosde 5 a 9 años = 3 puntos

Cumplimiento de la periodicidad

13Sí cumple = 13 puntosNo cumple = 0 puntos

25 criterios o más = 13 puntosde 20 a 24 criterios = 9 puntosde 15 a 19 criterios = 5 puntos

menos de 15 criterios = 0 puntos

Sí tiene = 16 puntosNo tiene = 0 puntos

(Índice A+B x 16)/100

Tomando el IIM máximo y el mínimo se establecen 16 rangosy se asignan puntuaciones de 0 a 16

¿Cómo se elabora el ranking?Ponderación de los indicadores de calidad

Puntuación máxim

a: 100

Criterios Latindex13

RevisoresExternos

16

Índice A+B16

IIM16

Pervivencia10

Bases de datos16

Tipo de base de datos A B C SD Especializada del área 6 3 1,5 0,75 Especializada en otra área 3 1,5 0,75 0,35 Multidisciplinar 6 3 1,5 0,75

Page 24: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

Ej.: Revista de FilologEj.: Revista de Filologíía Alemanaa Alemana

Pervivencia: 15 años

Cumple la periodicidad

Tiene evaluadores externos

Índice A+B: 84,01*16/100=

13,44Cumple 33

criterios Latindex

Está recogida en LLBA (3); MLA (3);

ISOC (1,5)

Índice de impacto Medio:

0,032

Page 25: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

Ej. Ranking Ej. Ranking LingLingüíüística y stica y LiteraturaLiteratura

Page 26: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

CCóómo presentar las publicaciones en revistas ante mo presentar las publicaciones en revistas ante las agencias de evaluacilas agencias de evaluacióónn

ANECA: indicios de calidadANECA: indicios de calidad

Factor de impacto en JCR y su posiciFactor de impacto en JCR y su posicióón en el n en el ááreareaFactor de impacto segFactor de impacto segúún In n In RecsRecs / In / In RecjRecj y posiciy posicióón en el n en el ááreareaPosiciPosicióón de la revista en el ranking RESHn de la revista en el ranking RESHIIM segIIM segúún RESHn RESHPosiciPosicióón de la revista en n de la revista en ScimagoScimago JournalJournal RankRank

Page 27: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

CCóómo presentar las publicaciones en revistas ante mo presentar las publicaciones en revistas ante las agencias de evaluacilas agencias de evaluacióónn

ANECA: indicios de calidadANECA: indicios de calidad

Indicadores de calidad segIndicadores de calidad segúún DICE (referencia para la ANECA)n DICE (referencia para la ANECA)Incluye presencia en bases de datos relevantes en la especialidaIncluye presencia en bases de datos relevantes en la especialidadd

CuartilCuartil de la revista en el de la revista en el áárea segrea segúún In n In RecsRecsArtArtíículo entre los 100 mculo entre los 100 máás citados de In s citados de In RecsRecsICDS de MIARICDS de MIARNNºº de citas en de citas en ScopusScopus, , GoogleGoogle ScholarScholar, etc., etc.NNºº de descargas segde descargas segúún repositorios, hemerotecas, etc.n repositorios, hemerotecas, etc.

Los mismos indicadores pueden Los mismos indicadores pueden emplearse para justificar en parte la emplearse para justificar en parte la calidad de las cinco contribuciones calidad de las cinco contribuciones

mmáás significativas que se presentan a s significativas que se presentan a la CNEAIla CNEAI

Page 28: Sistemas de evaluación en Ciencias Sociales y Humanas ...webs.ucm.es/BUCM/fll/doc9359.pdf · SJR: “elaborado a partir del algoritmo Page rank, que representa la visibilidad de

Gracias por vuestro tiempo