UNITED NATIONS OFFICE ON DRUGS AND CRIME€¦ · Web viewb) los hallazgos principales de la evaluación respecto de cada criterio de evaluación; c) las conclusione s principales

OFICINA DE LAS NACIONES UNIDAS CONTRA LA DROGA Y EL DELITOViena

Evaluación independiente de proyecto/evaluación en profundidad de

Título del proyecto/programa

Número del proyecto/programa

País

Mes AñoSi necesita más orientación, sírvase visitar el sitio web de la Sección de Evaluación Independiente, en la siguiente

dirección:http://www.unodc.org/unodc/en/evaluation/normative-

tools.htmlconsultar el Manual de la Sección de Evaluación

Independiente, en la siguiente dirección:https://www.unodc.org/unodc/en/evaluation/

evaluation-handbook.html o comunicarse directamente con la Sección de Evaluación

Independiente.Sírvase suprimir las partes destacadas en amarillo, ya que

su inclusión es meramente orientativa y de ayuda.

V.18-04351 (S)

https://www.unodc.org/unodc/en/evaluation/evaluation-handbook.html

https://www.unodc.org/unodc/en/evaluation/evaluation-handbook.html

http://www.unodc.org/unodc/en/evaluation/normative-tools.html

http://www.unodc.org/unodc/en/evaluation/normative-tools.html

NACIONES UNIDANueva York, Año

El presente informe de evaluación independiente ha sido preparado por un equipo de evaluación compuesto por (nombres y cargos de los evaluadores externos). La Sección de Evaluación Independiente (IES) de la Oficina de las Naciones Unidas contra la Droga y el Delito (UNODC) facilita las herramientas, directrices y plantillas que se deben utilizar en el proceso de evaluación de proyectos. Sírvase consultar los instrumentos pertinentes en el sitio web de la IES, en la dirección siguiente: http://www.unodc.org/unodc/en/evaluation/evaluation.html.

Si necesita comunicarse con la IES de la Oficina de las Naciones Unidas contra la Droga y el Delito, diríjase a la dirección siguiente:

United Nations Office on Drugs and CrimeVienna International CentreP.O. Box 5001400 Vienna, AustriaTeléfono: (+43-1) 26060-0Correo electrónico: [email protected] web: www.unodc.org

Descargo de responsabilidad

Las evaluaciones independientes de proyectos las programan y gestionan los directores de los proyectos y las llevan a cabo evaluadores independientes externos. La función de la Sección de Evaluación Independiente (IES) en lo que respecta a las evaluaciones independientes de proyectos es asegurar la calidad y prestar apoyo durante todo el proceso, pero la IES no interviene directamente ni realiza evaluaciones independientes de proyectos. No obstante, es responsabilidad de la IES dar respuesta al compromiso del Grupo de Evaluación de las Naciones Unidas (UNEG) de profesionalizar la función de evaluación y promover una cultura de evaluación en la UNODC en beneficio de la rendición de cuentas y de la mejora y el aprendizaje continuos.

Las opiniones expresadas en el presente informe de evaluación independiente son las del equipo de evaluación. No son un reflejo de las opiniones de la UNODC, ni de ninguna de las instituciones o Estados Miembros que se mencionan en él. Cualquier error u omisión es responsabilidad del equipo de evaluación.

© Naciones Unidas, Mes Año. Reservados todos los derechos en todo el mundo.

Las denominaciones empleadas en esta publicación y la forma en que aparecen presentados los datos que contiene no implican juicio alguno por parte de la Secretaría de las Naciones Unidas sobre la condición jurídica de ningún país, territorio, ciudad o zona, o sus autoridades, o sobre el trazado de sus fronteras o límites.

El presente documento se publica sin revisión editorial.

ii

ÍNDICE

Página

Respuesta de la dirección...................................................................xx

Resumen.............................................................................................xx

Cuadro sinóptico de hallazgos, pruebas y recomendaciones..............xx

I. Introducción........................................................................................00

Antecedentes y contexto....................................................................00

Metodología de la evaluación..............................................................00

II. Hallazgos de la evaluación..................................................................00

Diseño.................................................................................................00

Pertinencia..........................................................................................00

Eficiencia.............................................................................................00

Alianzas y cooperación........................................................................00

Eficacia................................................................................................00

Impacto...............................................................................................00

Sostenibilidad......................................................................................00

Derechos humanos, igualdad de género y no dejar a nadie atrás......00

Innovación (opcional)..........................................................................00

III. Conclusiones.......................................................................................00

IV. Recomendaciones...............................................................................00

V. Enseñanzas extraídas y mejores prácticas..........................................00

Anexos

I. Mandato de la evaluación...................................................................00

II. Herramientas de evaluación: cuestionarios y guías para las entrevistas00

III. Lista para el examen documental.......................................................00

IV. Relación de personas con las que se contactó durante la evaluación.00

iv

ABREVIATURAS Y SIGLAS

Abreviatura Nombre completo Abreviatura Nombre completo

Texto de ejemplo

Texto de ejemplo Texto de ejemplo

Texto de ejemplo

Texto de ejemplo

Texto de ejemplo Texto de ejemplo

Texto de ejemplo

RESPUESTA DE LA DIRECCIÓN

Sírvase copiar y pegar las recomendaciones del resumen en el cuadro siguiente – gracias.

Recomendación Respuesta de la dirección (aceptada/parcialmente aceptada/rechazada)

1: Texto de ejemplo

2: Texto de ejemplo

3: Texto de ejemplo

4: Texto de ejemplo

5: Texto de ejemplo

6: Texto de ejemplo

7: Texto de ejemplo

8: Texto de ejemplo

9: Texto de ejemplo

10: Texto de ejemplo

TÉNGASE EN CUENTA: La dirección del proyecto o programa deberá redactar el texto de su respuesta una vez la IES haya aprobado el informe – para las evaluaciones independientes de proyectos: el cuadro anterior es obligatorio, pero la presentación de texto adicional es opcional; para las evaluaciones en profundidad: tanto el cuadro anterior como la presentación de texto adicional son obligatorios.

RESUMEN

Esta sección deberá estar compuesta de un resumen breve de no más de cuatro páginas (o 14.000 caracteres, incluidos los espacios) que contenga la información siguiente:

a) introducción breve en la que se describa el proyecto, a saber, los objetivos, el propósito y el alcance de la evaluación, la metodología de la evaluación y la composición del equipo de evaluación;

b) los hallazgos principales de la evaluación respecto de cada criterio de evaluación;

c) las conclusiones principales;

d) solo las recomendaciones principales, con un ejemplo claro de cómo se basan en las conclusiones y, por consiguiente, en los hallazgos (sírvase acudir al cuadro sinóptico para consultar la lista íntegra de las recomendaciones). En el cuerpo principal del presente documento podrá obtener más orientaciones en relación con el cuadro sinóptico y el capítulo relativo a las recomendaciones;

e) las principales enseñanzas extraídas.

El resumen no debería ser una repetición del texto del cuerpo principal, sino que se deberá redactar de manera breve, nítida y clara, con el fin de hacer llegar a una gran variedad de lectores la información principal y más importante sobre la evaluación.

Véase a continuación el formato correcto que se deberá utilizar en todo el informe – con inclusión, entre otros aspectos, de los distintos niveles de encabezamientos, texto modelo, etc.

Antecedentes

Sobrescriba aquí su texto para generar un informe de evaluación con el formato y estilo adecuados.

a) Sobrescriba aquí su texto para generar un informe de evaluación con el formato y estilo adecuados.

(i) Sobrescriba aquí su texto para generar un informe de evaluación con el formato y estilo adecuados.Propósito, alcance y metodología de la evaluación


Hallazgos principales



Conclusiones principales



Recomendaciones principales

Recomendación 1 - TEMA (como subtítulo – por ejemplo, Dotación de personal; Vigilancia): Sobrescriba el texto del informe de evaluación aquí para que el formato y el estilo sean correctos.


Enseñanzas extraídas y mejores prácticas


viii

CUADRO SINÓPTICO DE HALLAZGOS, PRUEBAS Y RECOMENDACIONES

El cuadro sinóptico deberá contener únicamente los hallazgos más relevantes y todas las recomendaciones. Estas deberán ser pertinentes y practicables, e ir claramente dirigidas a un grupo específico de partes interesadas (por ejemplo, la dirección del proyecto o programa en cuestión1; una oficina, dependencia o sección concreta; etc.). Se pueden formular como máximo diez recomendaciones. Las recomendaciones deberán redactarse por orden de importancia, empezando por las más importantes.

En la columna de las pruebas se deberán incluir las fuentes generales de los hallazgos que condujeron a las recomendaciones (por ejemplo, el examen de los documentos del proyecto y los informes sobre los progresos realizados; las entrevistas con las partes interesadas internas; las entrevistas con los receptores; etc.).

TÉNGASE EN CUENTA: Los hallazgos y recomendaciones deberán ser breves para encajar en el formato del cuadro, por lo que no deberían copiarse directamente, por ejemplo, del capítulo dedicado a ellas en el cuerpo principal. Se deberá indicar claramente mediante un subtítulo el tema de cada hallazgo y de la recomendación conexa.

Hallazgos2 Pruebas (fuentes que sustentan los hallazgos)

Recomendaciones3

1. 1. 2. 2. 3. 3. 4. 4. 5. 5. 6. 6.7. 7.8. 8.9. 9.10. 10.

1 Las recomendaciones también podrán ir dirigidas a la dirección del proyecto y referirse claramente a la cooperación con otras dependencias, secciones, oficinas, etc., responsables concretas.

2 Los hallazgos (constataciones) utilizan las pruebas recabadas de la recopilación de datos para dar lugar a una afirmación fáctica. En algunos casos también se pueden incluir en esta columna las conclusiones en lugar de los hallazgos.

3 Las recomendaciones son propuestas encaminadas a mejorar la eficacia, la calidad o la eficiencia de un proyecto o programa; a redefinir los objetivos; o a reasignar los recursos. En aras de la exactitud y la credibilidad, las recomendaciones deberán ser el resultado lógico de los hallazgos y las conclusiones.

I. INTRODUCCIÓN

TÉNGASE EN CUENTA: El cuerpo principal del informe debe tener entre 25 y 30 páginas como máximo, sin contar los cuatro anexos (hasta 100.000 caracteres, incluidos los espacios). Se deben incluir además los mapas, gráficos, imágenes, etc., que sean pertinentes de la ejecución del proyecto o programa.

Antecedentes y contexto

En esta subsección se deberá incluir la información siguiente:

• el concepto y el diseño generales del proyecto, con inclusión de una valoración de la estrategia; el tiempo y los recursos previstos; y la claridad, la lógica y la coherencia del documento del proyecto;

• el propósito (objetivo) y el alcance (cobertura) de la evaluación;

• la composición del equipo de evaluación (que incluya una reseña breve de la experiencia; los conocimientos técnicos; el número de evaluadores y su género);

• un mapa de los países en los que el proyecto está en marcha (sírvase acudir al sitio web de las Naciones Unidas sobre información geoespacial, en la dirección siguiente: http://www.un.org/Depts/Cartographic/english/htmain.htm).


Propósito y alcance de la evaluación


Composición del equipo de evaluación


Encabezamiento del recuadroSobrescriba aquí su texto para generar un informe de evaluación con el

1

EVALUACIÓN INDEPENDIENTE DE: XXXX

formato y estilo adecuados.Sobrescriba aquí su texto para generar un informe de evaluación con el formato y estilo adecuados.

Mapa 1. Título

Metodología de la evaluación

En esta sección se deberán describir el enfoque y los métodos empleados para obtener los datos, recopilarlos y analizarlos. Esta parte es muy importante, ya que en ella se sientan las bases para que los resultados de la evaluación tengan credibilidad. Se deberá hacer referencia al anexo en el que se señalan las herramientas de evaluación.

La metodología de la evaluación deberá contribuir al propósito de esta. Además, deberá responder a cada una de las preguntas de evaluación que se formulan en el mandato y se perfilan aún más en el informe inicial, creando las condiciones propicias para que el estudio sea válido a nivel interno o externo. El informe de evaluación deberá tener una secuencia lógica, a saber: evaluación basada en pruebas; hallazgos basadas en la evaluación; recomendaciones basadas en los hallazgos o conclusiones.

Se debe hacer referencia al examen documental, la definición de las partes interesadas y su inclusión en el proceso de evaluación, la estrategia de muestreo y la triangulación.

2

INTRODUCCIÓN

Sírvase incluir al menos los gráficos siguientes:

número y tipo de partes interesadas entrevistadas (por ejemplo, un gráfico circular), con información relativa al sexo de los entrevistados y al número y tipo de partes interesadas encuestadas (si procede) – sírvase consultar el ejemplo que se incluye a continuación a modo de referencia;

países visitados durante la misión sobre el terreno.


Figura I. Título de la figura

a Nota para la figura.b Nota para la figura.Fuente: Referencia de la fuente de la figura.

[Gastos de apoyo al programaGastos de gestión y evaluacióna

Gastos del programa en las esferas de productosDólares EE.UU.Presupuesto total de UN.GIFT 2011 (est.)

Gastos de apoyo al programa (porcentaje)Gastos de gestión y de proyectos (porcentaje)Total de gastos generales (porcentaje)]

3

EVALUACIÓN INDEPENDIENTE DE: XXXX

Figura II. Partes interesadas entrevistadas para la presente evaluación independiente

[Partes interesadas entrevistadas para la presente evaluación independienteGeneralPersonal de otros organismos de las Naciones UnidasOrganizaciones de la sociedad civilDonantesInterlocutores gubernamentalesPersonal/consultores de la UNODC

Mujeres entrevistadas Hombres entrevistados Número de partes interesadas entrevistadas]

Limitaciones de la evaluación

El informe deberá destacar las restricciones importantes que hayan repercutido en el proceso de evaluación, por ejemplo, la escasez de misiones sobre el terreno debido a problemas de seguridad, las limitaciones presupuestarias o de tiempo y la falta de disponibilidad de algunas de las principales partes interesadas para realizar las entrevistas. En esta sección se deberá explicar asimismo cómo se superaron estas limitaciones.


4

II. HALLAZGOS DE LA EVALUACIÓN

Esta sección es la más importante, ya que en ella figura el análisis de la información y se articulan los hallazgos de la evaluación. Se trata de la sección más larga y detallada del informe, que se deberá sustentar en hechos demostrados mediante las fuentes o la metodología. Las demás secciones del informe se deberán basar en esta y referirse a ella.

Los hallazgos utilizan las pruebas recabadas de varias fuentes para dar lugar a una afirmación fáctica. Las preguntas correspondientes a cada criterio – con arreglo al informe inicial aprobado – se deberán incluir en un recuadro (véanse los ejemplos a continuación), seguidas de los hallazgos principales relacionadas con las preguntas.

Al redactar esta sección, el equipo de evaluación debe tener en cuenta que los hallazgos no solo se presentan con fines de documentación. Su finalidad más importante es sustentar las conclusiones, recomendaciones y enseñanzas extraídas de la evaluación.

Se deberá incluir un recuadro para las preguntas correspondientes a cada criterio. Además, se deberá incluir también un recuadro con los hallazgos principales y el resumen de cada criterio – con un máximo de tres frases.

Asimismo, sírvase mencionar claramente la función que desempeña la UNODC de apoyo a la aplicación de los ODS, su función en el país, su cooperación con otros organismos de las Naciones Unidas, etc. – con arreglo al mandato de las evaluaciones.

TÉNGASE EN CUENTA: Se deberán incluir, cuando sea posible, los mapas, gráficos, estadísticas, imágenes, etc., que sean pertinentes.

Diseño

Preguntas de evaluación: Sírvase copiar y pegar del informe inicial aprobado. Sobrescriba aquí su texto para generar un informe de evaluación con el




Resumen - Diseño

5

Sírvase sintetizar en un máximo de tres frases los hallazgos principales respecto del presente criterio.Sobrescriba aquí su texto para generar un informe de evaluación con el formato y estilo adecuados.Sobrescriba aquí su texto para generar un informe de evaluación con el formato y estilo adecuados.

Pertinencia



Figura III. Título de la figura

a Nota para la figura.

6

HALLAZGOS DE LA EVALUACIÓN

b Nota para la figura.Fuente: Referencia de la fuente de la figura.



Gastos de apoyo al programa (porcentaje)Gastos de gestión y de proyectos (porcentaje)a

Total de gastos generales (porcentaje)]

Resumen - PertinenciaSírvase sintetizar en un máximo de tres frases los hallazgos principales respecto del presente criterio.Sobrescriba aquí su texto para generar un informe de evaluación con el formato y estilo adecuados.Sobrescriba aquí su texto para generar un informe de evaluación con el formato y estilo adecuados.

Eficiencia


formato y estilo adecuados.


Resumen - EficienciaSírvase sintetizar en un máximo de tres frases los hallazgos principales respecto del presente criterio.Sobrescriba aquí su texto para generar un informe de evaluación con el formato y estilo adecuados.

7

Alianzas y cooperación



Resumen - Alianzas y cooperaciónSírvase sintetizar en un máximo de tres frases los hallazgos principales respecto del presente criterio.Sobrescriba aquí su texto para generar un informe de evaluación con el formato y estilo adecuados.

Eficacia

Preguntas de evaluación:1. Sírvase copiar y pegar del informe inicial aprobado.2. Sobrescriba aquí su texto para generar un informe de evaluación con el


Resumen - EficaciaSírvase sintetizar en un máximo de tres frases los hallazgos principales respecto del presente criterio.Sobrescriba aquí su texto para generar un informe de evaluación con el formato y estilo adecuados.

Impacto



8


Resumen - ImpactoSírvase sintetizar en un máximo de tres frases los hallazgos principales respecto del presente criterio.Sobrescriba aquí su texto para generar un informe de evaluación con el formato y estilo adecuados.

Sostenibilidad




Figura IV. Título de la figura

a Nota para la figura.b Nota para la figura.Fuente: Referencia de la fuente de la figura.



Gastos de apoyo al programa (porcentaje)Gastos de gestión y de proyectos (porcentaje)a

Total de gastos generales (porcentaje)]

9

Resumen - SostenibilidadSírvase sintetizar en un máximo de tres frases los hallazgos principales respecto del presente criterio.Sobrescriba aquí su texto para generar un informe de evaluación con el formato y estilo adecuados.

Derechos humanos, igualdad de género y no dejar a nadie atrás



Derechos humanos


Igualdad de género


No dejar a nadie atrás


Resumen - Derechos humanos, igualdad de género y no dejar a nadie atrásSírvase sintetizar en un máximo de tres frases los hallazgos principales respecto del presente criterio.Sobrescriba aquí su texto para generar un informe de evaluación con el formato y estilo adecuados.

10


Innovación (opcional)



Resumen - InnovaciónSírvase sintetizar en un máximo de tres frases los hallazgos principales respecto del presente criterio.Sobrescriba aquí su texto para generar un informe de evaluación con el formato y estilo adecuados.

11

III. CONCLUSIONES

El informe debe extraer conclusiones generales sobre la base de los hallazgos de la evaluación. Dichas conclusiones deberán añadir valor a los hallazgos y valerse de la recopilación de datos y los análisis realizados mediante una encadenación transparente de argumentos.

Las conclusiones señalan los factores de éxito y de fracaso del proyecto evaluado, prestando atención especial a los resultados y los impactos intencionales y no intencionales y, de manera más general, a cualesquiera otras fortalezas o debilidades.

TÉNGASE EN CUENTA: Debe haber un vínculo claro entre los hallazgos, las conclusiones y las recomendaciones.


12

IV. RECOMENDACIONES

Esta parte del informe deberá ofrecer recomendaciones claras, útiles, practicables y sujetas a plazos concretos, encaminadas a aumentar el desempeño del proyecto y mejorar la sostenibilidad de los resultados.

En el informe se deberán presentar con claridad recomendaciones encaminadas, por ejemplo, a mejorar el diseño, la ejecución y la gestión general del proyecto, así como recomendaciones sustantivas sobre el tema objeto de evaluación o a fin de modificar las políticas.

Las recomendaciones se deberán basar claramente en las conclusiones, que a su vez se basan en los hallazgos.

Cada recomendación deberá indicar explícitamente las medidas o decisiones que se deben adoptar, así como el grupo específico de partes interesadas al que va dirigida la recomendación (el mismo que en el cuadro sinóptico).

TÉNGASE EN CUENTA: Las recomendaciones no van dirigidas a los Gobiernos, ya que el objetivo de la evaluación es el proyecto o programa en cuestión.

Es fundamental poner de manifiesto los vínculos que existen entre los hallazgos o las conclusiones y las recomendaciones. Esta parte del informe deberá proporcionar información más detallada sobre la recomendación que el cuadro sinóptico. Se pueden formular como máximo diez recomendaciones. Estas deberán formularse por orden de importancia, empezando por las más importantes. Se deberá indicar claramente mediante un subtítulo el tema de cada una de ellas.

Sírvase consultar el ejemplo siguiente de cómo se deben presentar las recomendaciones (como en el resumen):

Recomendación 1 - TEMA (como subtítulo – por ejemplo, Dotación de personal; Vigilancia):

Sírvase incluir bajo cada subtítulo el hallazgo o conclusión conexa, así como la formulación completa de la recomendación.


13

V. ENSEÑANZAS EXTRAÍDAS Y MEJORES PRÁCTICAS

Las enseñanzas extraídas son “Generalizaciones basadas en las experiencias de evaluación de proyectos, programas o políticas en circunstancias específicas, que se aplican a situaciones más amplias. Con frecuencia, las enseñanzas destacan los puntos fuertes o débiles en la preparación, el diseño y la puesta en práctica que afectan al desempeño, los resultados y el impacto”.

Las enseñanzas extraídas son un elemento fundamental de cualquier sistema de gestión de conocimientos y son importantes para la mejora permanente del desempeño de organizaciones como la UNODC. A veces dichas enseñanzas se obtendrán gracias a aciertos y otras veces provendrán de esferas en las que exista margen de mejora.

El propósito de una enseñanza extraída es observar qué funciona y qué no. Las enseñanzas pueden ser experiencias fructíferas que se deberían repetir o esferas en las que se debe producir un cambio a fin de mejorar. Pueden dar ideas sobre cómo mejorar los procesos (cómo se hicieron las cosas) o los productos.

El informe de evaluación se deberá centrar en las enseñanzas más importantes, en especial las que tengan más posibilidades de aplicación y las que tengan las características siguientes:

a) Las enseñanzas extraídas de un proyecto concreto deberán destacar las fortalezas y debilidades en la preparación, el diseño y la ejecución que afecten al desempeño, los resultados y el impacto. Se pueden aplicar también a otros proyectos y programas, así como a políticas, y tienen potencial para mejorar las medidas futuras.

b) Las enseñanzas extraídas se deberán basar en los hallazgos y las pruebas que se presentan en el informe. No se deberán redactar como recomendaciones ni a modo de observación o descripción.


14

ANEXO I. MANDATO DE LA EVALUACIÓN

Copiar el texto del mandato aprobado. TÉNGASE EN CUENTA: No se deben incluir los anexos del mandato.

NOTA relativa a los anexos: Se podrán incluir más anexos si añaden valor al informe de evaluación (por ejemplo, casos prácticos; relación de productos y resultados conseguidos/no conseguidos; etc.).

15

ANEXO II. HERRAMIENTAS DE EVALUACIÓN CUESTIONARIOS Y GUÍAS PARA LAS ENTREVISTAS


16

ANEXO III. LISTA PARA EL EXAMEN DOCUMENTAL

Documentos de la UNODC

Documento del proyecto;

Documento del proyecto;

Sobrescriba aquí el texto del informe de evaluación

Número de documentos internos examinados:

Documentos externos

MANUD en el país XXX

Informe de los ODS xxx

Estudio sobre xxx

Sobrescriba aquí el texto del informe de evaluación

Número de documentos externos examinados:

Número total de documentos examinados:

17

ANEXO IV. RELACIÓN DE PERSONAS CON LAS QUE SE CONTACTÓ DURANTE LA EVALUACIÓN

Número de entrevistados

Organización Tipo de parte interesada4

Datos desglosados por sexo

País

Texto de ejemplo

Texto de ejemplo

Texto de ejemplo Hombres:Mujeres:

Texto de ejemplo

Texto de ejemplo

Texto de ejemplo

Texto de ejemplo Hombres:Mujeres:

Texto de ejemplo

Total: Hombres:Mujeres:

4 Por ejemplo, entre otros, una organización de la sociedad civil; el encargado de ejecutar el proyectoo programa; un receptor gubernamental; un donante, una institución académica/instituto de investigación; etc.

18

Documents

UNITED NATIONS OFFICE ON DRUGS AND CRIME€¦ · Web viewb) los hallazgos principales de la evaluación respecto de cada criterio de evaluación; c) las conclusione s principales