Embed Size (px)
Citation preview
Evaluación descentralizada para la toma de decisiones basada en la evidenciaOficina de Evaluación del WFP
Sistema para el Aseguramiento de la Calidad de las Evaluaciones Descentralizadas (DEQAS)
Control de Calidad para los Términos de Referencia de una Evaluación Descentralizada
Versión junio 2018
[Título de la evaluación descentralizada]Contenido General
Requisitos generales Observaciones/estatus
Título: Debe ser claro y no muy extenso y debe reflejar el tema de la evaluación
Tamaño: No debe exceder las 15 páginas (sin incluir los apéndices)
Accesibilidad: Los TDR deben estar escritos en lenguaje claro y comprensible Los TDR deben enfatizar de manera adecuada el enfoque
estratégico u operativo de la evaluación descentralizada. Los TDR deben proveer un resumen sustancial del tema de la
evaluación. Los TDR deben suministrar información suficiente a las partes
interesadas sobre cómo se desarrollará la evaluación Los TDR deben suministrar información suficiente al equipo de
la evaluación sobre lo que se espera del mismo. Formato
Los TDR deben seguir el formato y todos los elementos se deben incluir (títulos)
C C T D R V e r s i ó n n o v i e m b r e d e 2 0 1 5 P a g e 1 | 14
Las siglas deben estar explicadas cuando se usan por primera vez.
Las páginas y los párrafos deben tener numeración electrónica. Se deben crear referencias cruzadas. Se debe hacer uso pertinente de tablas y diagramas y los
mismos deben estar correctamente numerados. Al hacer uso de citas o cifras en los TDR se deben suministrar
las fuentes de los datos/citas (ya sea directamente al pie de tabla/gráfico o en las notas al pie de página)
1. IntroducciónRequisito general: La introducción debe proveer información clave acerca del propósito de los TDR y de los hechos pertinentes al tema de la evaluación descentralizada.
Contenido Esperado Criterios de evaluación Observaciones/estatus
Propósito de los TDR Información factual sobre el
tipo de la evaluación (p. ej., actividad, operación, área temática, portafolio de país, modalidad de transferencia, proyecto piloto u otro tema bajo evaluación) y titulo
Especificación del tema la evaluación
Especificación del alcance de la evaluación
El período cubierto por la evaluación y su alcance
Se suministra el contenido esperado.
Hay indicación clara del tema de la evaluación
El tipo y titulo de la evaluación El nombre de la oficina que
comisiona la evaluación El período que la misma cubre
El alcance de la evaluación
2. Razones de la evaluaciónRequisito general: Explicación concisa de quién y por qué se llevará a cabo la evaluación.
Contenido Esperado Criterios de evaluación Observaciones/estatus
2.1 Justificación
C C T D R – V e r s i ó n J u n i o 2 0 1 8 P a g e 2 | 14
Especificación de por qué se llevará a cabo la evaluación
Especificación de por qué se necesita en el presente momento
Especificación de qué uso se va a dar a la evaluación por parte de la oficina del WFP que la comisiona y por parte de otras partes interesadas
La justificación es válida Hay claridad en sobre cómo
la oportunidad de la evaluación cumple con las necesidades en los procesos de toma de decisiones.
2.2 Objetivos
Especificación de los objetivos de la evaluación (p. ej., asunción de responsabilidad y aprendizaje)
Se debe realzar el texto estándar en un párrafo adicional para especificar si se va a dar más peso al objetivo de responsabilidad o al de aprendizaje y por qué
Se hace uso de texto estándar sobre el tema de asunción de responsabilidad y aprendizaje
Se añaden objetivos específicos, según correspondan, o hay contextualización de los objetivos de asunción de responsabilidad y aprendizaje
Se ha realzado el texto según lo requerido, según se haga más énfasis en uno de los objetivos
2.3 Partes interesadas y usuarios
Especificación de las partes interesadas clave, tanto internas como externas, y de cuál es su interés en la evaluación
Especificación de los usuarios planeados de la evaluación, tanto primarios como secundarios e internos como externos al WFP, según
Todas las partes interesadas pertinentes han sido identificadas o incluidas, incluyendo los beneficiarios
Se demuestra entendimiento de los intereses y de las preocupaciones de las partes interesadas
C C T D R – V e r s i ó n J u n i o 2 0 1 8 P a g e 3 | 14
corresponda Indicación de cómo se van a
incluir los puntos de vista de los beneficiarios (hombres, mujeres, niños y niñas) en el proceso de la evaluación, incluyendo los relacionados con la responsabilidad ante las poblaciones afectadas, y cómo esto se va a abordar.
La identificación de los usuarios está ligada a las razones y a los objetivos de la evaluación
Los beneficiarios han sido identificados como partes interesadas
Hay un análisis claro de cómo se van a mantener los compromisos del WFP frente a la responsabilidad ante las poblaciones afectadas
El análisis de las partes interesadas tiene en cuenta las cuestiones de género
3. Contexto y tema de la evaluaciónRequisito general: Descripción integral del contexto de la evaluación e información sobre la naturaleza del tema de la evaluación
Contenido Esperado Criterios de evaluación Observaciones/estatus
3.1 Contexto
Inclusión de información acerca del contexto dentro del cual el tema de la evaluación se está/ha estado implementando, incluyendo: Pobreza, seguridad alimentaria Políticas, prioridades y
capacidad institucional del gobierno
Asuntos humanitarios, incluyendo programas de protección social, patrones de migración y comunidades de acogida, y tensiones sociales
Datos clave relacionadas con
La información contextual está enfocada y es concisa.
La información es relevante y necesaria para entender el contexto del tema de la evaluación
La sección se enfoca en datos de tendencias pertinentes, consistentes con el enfoque y que son importantes para el tema de la evaluación.
C C T D R – V e r s i ó n J u n i o 2 0 1 8 P a g e 4 | 14
3. Contexto y tema de la evaluaciónODS 2 / ODS 17 en el contexto (región, país, nivel subnacional / local)
Dimensiones de género del contexto
Asistencia internacional en el área
Eventos externos clave Otros trabajos del WFP en el
área, y Trabajos por parte de otros
actores clave3.2 Tema de la evaluación
El tipo de actividad/operación/área temática/modalidad de transferencia/Proyecto piloto/otro tema de evaluación El alcance geográfico del tema de la evaluación Fechas relevantes: fecha de aprobación, fecha de inicio, fecha estimada de finalización Los socios principales (gobierno, ONG, bilaterales, multilaterales) Las cifras de producción planeadas al momento del diseño El número de beneficiarios (planeados y reales), desagregados por edad/ género/actividad La cantidad o monto de las transferencias (alimentos, dinero en efectivo, cupones) planeadas y reales. Las cifras de producción
La información es relevante y necesaria para entender el tema de la evaluación:
1. ¿Cuál es el tema?2. ¿Cuándo se diseñó?3. ¿Cuáles son los objetivos
planeados, la producción esperadas y las actividades clave?
4. ¿Quienes participarán en la implementación?
5. ¿Cuáles son las cifras de producción planeadas y reales (beneficiarios, Valor en $ de C&V)?
6. Valor de las contribuciones clave (valor en $, asistencia técnica AT/ actividades de desarrollo de la capacidad) planeadas y reales
7. ¿Cuál es el nivel total de financiamiento del tema de la evaluación durante el
C C T D R – V e r s i ó n J u n i o 2 0 1 8 P a g e 5 | 14
3. Contexto y tema de la evaluaciónde asistencia técnica (AT)/ actividades de desarrollo de la capacidad Cualquier otra cifra de producción El modelo lógico o el marco lógico deben ser mencionados, si están disponibles. Si ninguno de los dos está disponible, esto también debe indicarse. Recursos (porcentaje de los requerimientos totales que hayan sido financiados) y los donantes clave. Si los recursos provienen de un fondo común, se deben mostrar los recursos asignados Los objetivos clave, las cifras esperadas de producción y las actividades que se espera llevar acabo Cualquier otra actividad, intervención o operación previa o simultánea pertinente (por parte del WFP o de otros actores) Cualquier cambio a la implementación planeada en cuanto al cubrimiento, al presupuesto, a los beneficiarios planeados y las respectivas explicaciones de los mismos Conclusiones / recomendaciones relevantes de evaluaciones anteriores y revisiones que son relevantes para esta evaluaciónLas dimensiones de equidad de género y de empoderamiento de las mujeres pertinentes al tema
periodo en que se va a llevar a cabo? La disponibilidad de esta información es imperativa en todos los TDR para ED
Los asuntos relevantes de las evaluaciones y revisiones anteriores pertinentes a la evaluación están resaltados
Las diferencias entre el diseño original y el final están explicadas, según correspondan
Se explicaron la equidad de género y de empoderamiento de las mujeres y si el diseño del programa se basó en un análisis de género
C C T D R – V e r s i ó n J u n i o 2 0 1 8 P a g e 6 | 14
3. Contexto y tema de la evaluaciónde la evaluación y al contexto Referencias a si (o no) el diseño del programa estuvo informado por un análisis/marco de género. Mapas/gráficos para ilustración
4. Enfoque de la evaluaciónRequisito general: Claridad sobre el alcance de la evaluación, sobre los criterios de la misma y sobre las preguntas clave, así como de la disponibilidad y la calidad de los datos que la sustentan, incluyendo cualquier falta de datos significativa. De igual manera, debe haber claridad en el enfoque general y en los aspectos de la metodología que el equipo de evaluación incorporará en su respuesta a los TDR y en la metodología propuesta por el mismo.
Contenido Esperado Criterios de evaluación Observaciones/estatus
4.1 Alcance
El alcance definido debe especificar qué va a ser y que no va a ser incluido en la evaluación, con respecto a las actividades del tema de la evaluación
Se debe especificar el enfoque de la evaluación, incluyendo: período, problemas, áreas geográficas, operaciones y tipos de actividades, y grupos objetivo Integrar dimensiones de género en el ámbito del alcance del análisis de la evaluación de una manera que asegure la recopilación de los datos relacionados
Hay claridad en lo que se va y lo que no se va a cubrir con relación a los contenidos/cubrimiento del tema de la evaluación
Hay claridad acerca de la duración/período en que se va a llevar a cabo la evaluación
Hay una clara justificación del alcance y del enfoque, incluyendo la selección de las actividades y de las áreas
Una clara integración de las cuestiones de género en el alcance de la evaluación.
C C T D R – V e r s i ó n J u n i o 2 0 1 8 P a g e 7 | 14
con la equidad de género y de empoderamiento de las mujeres
4.2. Criterios de evaluación y preguntas de la evaluación
Los criterios de evaluación deben ser elegidos de un listado y su justificación debe ser apropiada y consistente con el propósito y con los objetivos de la evaluación
Las preguntas de la evaluación deben estar especificadas y las mismas deben abordar los criterios seleccionados
Los asuntos de género deben estar integrados a lo largo de las preguntas de la evaluación
Hay clara explicación de los criterios de evaluación elegidos y la respectiva justificación en el caso de que no se haya elegido alguno.
Las preguntas de la evaluación son claras y pertinentes al tema de la evaluación
Las preguntas de la evaluación abarcan de manera suficiente los criterios de evaluación seleccionados
El género está en efecto integrado en las preguntas
4.3 Disponibilidad de los datos
Identificación de las fuentes principales de información /datos con las que cuenta el equipo de la evaluación
Descripción de cualquier falta de datos y propuestas para el manejo de dichas faltas de datos
Describir la disponibilidad de los datos y la calidad de los datos desagregados en función del género, incluida la existencia (o no) de datos relacionados con los resultados específicos de género.
Hay clara indicación de los datos disponibles y de sus fuentes
Las limitaciones y deficiencias están explicadas y han sido incluidas en los TDR
Se incluyen las medidas de mitigación sugeridas
Disponibilidad y calidad de datos desagregados por género y existencia / o no de datos relacionados con resultados específicos de género
C C T D R – V e r s i ó n J u n i o 2 0 1 8 P a g e 8 | 14
4.4 Metodología
Uso del texto estándar suministrado en el formato.
Presentación de la metodología general para la evaluación, describiendo los criterios, el requerimiento de imparcialidad y los métodos que serán empleados (cuantitativo, cualitativo o método mixto)
Identificación de los riesgos clave y las medidas de mitigación/manejo apropiadas al enfoque metodológico propuesto para su posterior refinamiento durante la etapa de inicio, según corresponda.
Especificación de cómo se van a abordar los asuntos de género a través del uso de una metodología que tome en cuenta los mismos y del uso de herramientas y técnicas de análisis de datos.
Se hace uso del texto estándar.
Hay una clara descripción de la metodología general para la evaluación, incluyendo los métodos para la recopilación de los datos y el enfoque general para asegurar la imparcialidad
Los riesgos clave y las medidas apropiadas para la mitigación/manejo para el enfoque propuesto, han sido identificadas de manera satisfactoria;
Se provee suficiente detalle para entender cómo la metodología abordará los asuntos de género
4.5 Aseguramiento de la calidad
Uso del texto estándar suministrado en el formato de los TDR.
Identificación de medidas adicionales para asegurar la calidad del proceso y del producto, incrementando así la credibilidad e imparcialidad de la evaluación.
Se hace uso del texto en formato estándar.
Los estándares de calidad están incluidos en los TDR.
El aseguramiento de la calidad está incorporado a través de todo el proceso, con una presentación breve de cómo se hará el control de calidad a los diferentes
C C T D R – V e r s i ó n J u n i o 2 0 1 8 P a g e 9 | 14
productos Los requerimientos que el
equipo tiene sobre el aseguramiento de la validez y la exactitud de los datos están explicados en detalle
5 Etapas y entregables
Requisito general: Clara indicación del período general y de los entregables clave de la evaluación.
Contenido Esperado Criterios de evaluación Observaciones/estatus
Aclaración del período de las cinco etapas de la evaluación y de sus entregables, incluyendo los hitos
Especificación de si se requieren otros productos aparte del informe de la evaluación (p. ej., PowerPoint; resumen independiente, vídeo o si hay sugerencias de algún producto innovador hechas por el equipo de la evaluación).
Se ha hecho uso de la tabla sugerida en el apéndice 2 del formato de los TDR
Se establece un plazo razonable para cada una de las etapas/pasos
Hay una clara identificación de los entregables y sus responsables
6 Organización de la evaluación y consideraciones éticas
Requisito general: Clara indicación de la organización general de la evaluación, incluyendo los acuerdos para su manejo, la conformación del equipo de la evaluación y las competencias requeridas; también de las líneas de comunicación, del plazo para cada entregable y de las consideraciones clave anticipadas, incluyendo las medidas de seguridad a ser consideradas en la planeación de la ejecución de la evaluación. Es importante incluir cualquier problema ético potencial que ya se haya identificado y proponer medidas de mitigación.
C C T D R – V e r s i ó n J u n i o 2 0 1 8 P a g e 10 | 14
Contenido Esperado Criterios de evaluación Observaciones/estatus
6.1 Ejecución de la evaluación Indicación de cómo se
llevará a cabo y se dirigirá la evaluación, incluyendo los aspectos clave de comunicación
Especificación de cualquier consideración ética para llevar a cabo la evaluaciónIndicación de cualquier problema ético potencial que ya haya sido identificado y proponga medidas de mitigación
Inclusión del cronograma de la evaluación
Identificación de las tareas y resultados de cada miembro del equipo en el calendario de la evaluación.
Se especifica la estructura del equipo y su relación con el Director de Evaluaciones del WFP
Hay consideración de los asuntos éticos que puedan estar relacionados al tema de la evaluación
El calendario de la evaluación es lógico y provee plazos adecuados para todas las etapas de la misma (incluyendo el tiempo para las discusiones de los borradores de los documentos). Se hace uso del apéndice 2 de los TDR
6.2 Conformación del equipo y competencias Indicación de cómo
estará conformado el equipo de la evaluación (incluyendo género, nacionalidad y el contexto cultural correspondiente, según aplique)
Especificación de las competencias y del conocimiento clave del equipo de la evaluación, incluyendo qué tan apropiada es la combinación de sus habilidades para la
El balance de las habilidades del equipo de la evaluación es consistente con el tema de la misma e incluye la especialidad de cada miembro en uno o más de los temas de la misma
Se incluyen los parámetros de género para el equipo de la evaluación
Se especifica la fluidez hablada en el (los) idioma(s)
Se incluye la especialidad en temas de género
Las competencias de liderazgo y comunicación y las competencias
C C T D R – V e r s i ó n J u n i o 2 0 1 8 P a g e 11 | 14
evaluación. Especificación del requerimiento de idiomas y de las habilidades de liderazgo del director del equipo
Especificación de la especialización del equipo en temas de género y de las habilidades pertinentes para evaluar las dimensiones de género
analíticas de cada miembro del equipo están explicadas en detalle
6.3 Consideraciones de seguridad
Especificación de cualquier consideración pertinente en materia de seguridad
Las consideraciones en materia de seguridad son pertinentes al contexto de la evaluación
Las consideraciones en materia de seguridad son pertinentes a la naturaleza de los acuerdos de contratación con el WFP
7 Roles y responsabilidades de las partes interesadas
Requisito general: Indicación clara de las expectativas de participación de las partes interesadas, tanto internas como externas y de sus respectivos roles y responsabilidades
Contenido Esperado Criterios de evaluación Observaciones/estatus
Descripción del rol de las partes interesadas clave en el proceso de la evaluación (Oficina de País/Área/Sub-oficina del WFP, Agencia regional del WFP, Oficinas principales del WFP, partes
Todas las partes interesadas están identificadas, demostrando así la imparcialidad.
Hay un claro entendimiento de los intereses y preocupaciones de las partes interesadas.
Hay identificación de las partes interesadas indirectas que
C C T D R – V e r s i ó n J u n i o 2 0 1 8 P a g e 12 | 14
interesadas del gobierno nacional (los ministerios, departamentos o unidades pertinentes), las agencias de la ONU socias, los socios en la implementación), Oficina de Evaluación, Comité interno de la evaluación, Grupo de referencia de la evaluación.
Descripción clara de las responsabilidades de las partes interesadas clave.
puedan tener alguna participación.
Hay claridad sobre las medidas que se usarán para asegurar la imparcialidad y la credibilidad de la evaluación, con relación a cada una de las partes interesadas
Se establece un Comité interno de la evaluación y un Grupo de referencia de la evaluación, y sus roles y responsabilidades se han determinado.
8. Comunicación y presupuesto
Requisito general: Clara indicación de los acuerdos para la comunicación a lo largo del proceso, incluyendo cómo se difundirá el informe y los roles y responsabilidades para la comunicación y distribución del informe.
Contenido Esperado Criterios de evaluación Observaciones/estatus8.1 Comunicación
Especificación de las intenciones con relación al Plan de comunicación y aprendizaje, y cómo éste se va a desarrollar, incluyendo la consideración a la equidad de género y empoderamiento de las mujeres como parte de la estrategia de diseminación.
Determinación de los roles y responsabilidades relacionados a la comunicación
Especificación de las necesidades de traducción y
Los roles y responsabilidades relacionados a la comunicación se han establecido
El plan de comunicación y aprendizaje está claramente explicado y el mismo se ha tomado en cuenta dentro del cronograma y del presupuesto
Hay un claro establecimiento de las necesidades de traducción
C C T D R – V e r s i ó n J u n i o 2 0 1 8 P a g e 13 | 14
del lenguaje de cada informe, si no está escrito en inglés.
8.2 PresupuestoRequisito general: Claro establecimiento de cualquier lineamiento o limitación presupuestaria.
Contenido Esperado Criterios de evaluación Observaciones/estatus Uso de texto estándar en el
formato de los TDR. Aclare qué opción de
contratación se utilizará Aclaración de si el presupuesto va a incluir el costo de los talleres o de los productos especiales de comunicación que se realizarán, según corresponda.
Se hace uso de texto en formato estándar
Hay claridad en el tipo de contratación que se va a usar (licitación abierta, LTA/SLA o acción de RR.HH.)
Hay claridad sobre el costo de los elementos que se van/deban ser incluidos en el presupuesto de la evaluación, tales como talleres o esfuerzos de comunicación especiales, según corresponda.
Apéndices Comentario Observaciones/estatus
Mapa(s) Cronograma/calendario de la
evaluación Miembros del Comité de la
evaluación y del Grupo de referencia de la evaluación
Siglas Apéndices técnicos
Criterios de evaluación: Están completos y son los necesarios
C C T D R – V e r s i ó n J u n i o 2 0 1 8 P a g e 14 | 14
