Modelos de evaluación

Dra. Norma L. Batista

04/21/23 Modelos de Evaluación Dra. N. Batista

1

Relación entre evaluación y planificación

¿Cuál es la relación entre la evaluación y la planificación de un programa?

PLANIFICACIÓN

EVALUACIÓN

04/21/23 Modelos de Evaluación Dra. N. Batista

2

1. Modelo de DiscrepanciaAutor: Andrés SteinmetzSe basa en los conceptos de

Estándar

Desempeño

Discrepancia04/21/23 Modelos de Evaluación

Dra. N. Batista3

EstándaresEstándar – Nivel de ejecución que un programa debe lograr, según propuesto.

•Los estándares pueden ser representados por las metas u objetivos del programa que fueron previamente establecidos.•Los estándares deben estar bien definidos en las fases de diseño del programa.•Pueden redactarse estándares de proceso y de producto. 04/21/23 Modelos de Evaluación

Dra. N. Batista4

DesempeñoDesempeño-Logros que obtiene el programa. Pueden ser formativos o sumativos.

El desempeño se mide y obtiene a través de la recogida de datos cualitativos o cuantitativos ( de manera formativa o sumativa), utilizando instrumentos de medición.

04/21/23 Modelos de Evaluación Dra. N. Batista

5

Discrepancia

Resultado de la comparación entre el Estándar y el Desempeño de un programa.

Se comparan los objetivos ( estándares) establecidos previamente con los logros ( desempeño) obtenidos ( de manera formativa o sumativa)

04/21/23 Modelos de Evaluación Dra. N. Batista

6

Ejemplo: Aplicación Modelo Discrepancia

1. Examinar el estándar:•Ejemplo de un estándar de producto:

Un ( estándar) objetivo de producto puede ser: Al finalizar en el programa X, el 75 % de los participantes demuestren control de su agresividad, según medido en una Escala Likert.

04/21/23 Modelos de Evaluación Dra. N. Batista

7

2. Se administra la Escala Likert a los participantes. Se analizan los datos recogidos. Se encuentra que el 60 % demuestren control de su agresividad, lo que constituye el desempeño.

3. Se hace la comparación ( discrepancia), con el objetivo ( estándar) establecido. Así se lleva a cabo para cada estándar a ser evaluado.

04/21/23 Modelos de Evaluación Dra. N. Batista

8

Informe de evaluaciónSe escribe un Informe de Evaluación donde se presenta el análisis de discrepancia en una tabla y una interpretación textual.

Estándar Desempeño Análisis de Discrepancia

75 % dominio agresividad

Administración y análisis Escala Likert, donde se encontró un 60 % dominio

Se concluye que no se logró el Estándar, quedando por debajo por 15 % de lo esperado.

04/21/23 Modelos de Evaluación Dra. N. Batista

9

2. Modelo CIPPAutor: Daniel Stufflebeam

04/21/23 Modelos de Evaluación Dra. N. Batista

10

• Sostiene que el propósito de una evaluación debe ir más allá de demostrar el logro de los estándares y que debe buscar datos más abarcadores que permitan perfeccionar un Programa.

• Por eso, incluye diversas áreas de evaluación de un programa, lo que provee información valiosa para la toma de decisiones gerenciales y programáticas.

• Estas evaluaciones pueden realizarse de manera formativa o sumativa.

04/21/23 Modelos de Evaluación Dra. N. Batista

11

Evaluación del Contexto

El propósito de la evaluación de Contexto es facilitar la toma de decisiones del programa, en términos de:

•Definir más claramente el contexto programático que debe ser abarcado, así como las metas y objetivos del programa relacionadas con la satisfacción de necesidades de los participantes.

•Ofrecer retro comunicación para facilitar cambios en la planificación del programa.04/21/23 Modelos de Evaluación

Dra. N. Batista12

Evaluación del Contexto

- Define el contexto institucional en que se lleva a cabo el programa ( misión, visión, metas, objetivos).

-Identifica las necesidades de la población que participa.

-Determina si los objetivos del programa cumplen las necesidades de los participantes.

04/21/23 Modelos de Evaluación Dra. N. Batista

13

Evaluación del Contexto ( cont.)

• Para la recogida de datos, utiliza la inspección y revisión de documentos, administración de cuestionarios, entrevistas y grupos focales con gerenciales y con participantes.

04/21/23 Modelos de Evaluación Dra. N. Batista

14

Evaluación de Insumo •El propósito de la evaluación es examinar la propuesta del programa, en términos de: el diseño del programa; las estrategias; las capacidades económicas y de recursos humanos.

•Facilitar el seleccionar y accesar recursos de apoyo ( económico y de otra índole).

•Ofrecer retro comunicación para facilitar cambios en la planificación del programa.

04/21/23 Modelos de Evaluación Dra. N. Batista

15

Evaluación de Insumo ( cont.)

• Para la recogida de datos, examina la propuesta del programa, lleva a cabo inventarios de recursos humanos y económicos; evalúa materiales disponibles y analiza estrategias de solución de problemas.

• Hace búsqueda de bibliografía, visita programas similares donde entrevista a la gerencia del alto nivel y hace gestiones para identificar recursos económicos.

04/21/23 Modelos de Evaluación Dra. N. Batista

16

Evaluación del proceso•El propósito de la evaluación es monitorear la implantación del diseño del programa.

•Identifica las barreras para la implantación del programa.

•Entrevista y mantiene comunicación constante con los gerenciales y los que implantan el programa.

•Ofrecer retro comunicación para facilitar cambios en la planificación del programa.

04/21/23 Modelos de Evaluación Dra. N. Batista

17

Evaluación del proceso ( cont.)

• Para la recogida de datos, se observan los procesos del programa mientras están ocurriendo, se entrevista y comunica de manera continua con los gerenciales, los profesionales de servicio y los participantes.

• De ser necesarios, se discuten y sugieren cambios en los procesos sobre la marcha.

04/21/23 Modelos de Evaluación Dra. N. Batista

18

Evaluación de Producto•El propósito de la evaluación es examinar los logros y la efectividad del programa, analizarlos ( cualitativa y cuantitativamente ), así como relacionarlos con los objetivos y con toda la información que se recogió en las evaluaciones de Contexto, Insumo, y Proceso.

•Interpreta los méritos del programa.

•Ofrecer retro comunicación para facilitar cambios en la planificación del programa.

04/21/23 Modelos de Evaluación Dra. N. Batista

19

Evaluación de Producto ( cont.)

• Para la recogida de datos, administra diversos instrumentos de medición para determinar logro de las metas y objetivos del programa.

• Estos datos son analizados de manera cualitativa y cuantitativa, para rendir informe y recomendaciones.

04/21/23 Modelos de Evaluación Dra. N. Batista

20

El propósito del Modelo CIPP es……

E. Contexto

E. Producto E. Insumo

E. Proceso

Planificación Programa 04/21/23 Modelos de Evaluación Dra. N. Batista

21

3. Modelo Centrado en el ParticipanteAutor: Robert Stake

•Sostiene que las evaluaciones de programas deben girar en torno a los participantes, además del logro de los objetivos de éste.

04/21/23 Modelos de Evaluación Dra. N. Batista

22

Modelo Centrado en el Participante ( cont.)

Este Modelo de Evaluación centra su gestión en los participantes en tres aspectos fundamentales, y recoge datos en términos de:

•Antecedentes:

•Transacciones

•Resultados

04/21/23 Modelos de Evaluación Dra. N. Batista

23

• Antecedentes

información sobre los participantes en aspectos que puedan afectarlo en sus ejecutorias dentro del programa.

Por ejemplo:

Facilidades para transportarse a la agencia, apoyo con el cuido de niños, actitudes para participar ( si es o no obligatorio), etc.

04/21/23 Modelos de Evaluación Dra. N. Batista

24

• Transacciones-

incluye las interacciones de los participantes con otras personas dentro de la agencia que puedan afectar su ejecutoria en el programa.

Ejemplo: Cómo se relaciona con los profesionales de servicios, con los gerenciales, secretarias, personal de mantenimiento, etc.

04/21/23 Modelos de Evaluación Dra. N. Batista

25

• Resultados-

la efectividad del programa en ayudar a los participantes a alcanzar los objetivos previamente establecidos y el impacto que tiene en éstos.

04/21/23 Modelos de Evaluación Dra. N. Batista

26

Modelo Centrado en el Participante ( cont.)

• Para la recogida de datos en las tres áreas descritas utiliza instrumentos de naturaleza cualitativa y cuantitativa.

04/21/23 Modelos de Evaluación Dra. N. Batista

27