Evaluación (programas y proyectos)

Marco

  • ¿Cuándo acaba un proyecto de intervención?
    • La vuelta a la lógica de la observación de la observación, mediada por la intervención
  • Dos principios iniciales:
    • Eficacia
    • Eficiencia
  • Principios añadidos: 
    • Reflexivo: aprender de lo hecho
    • Benchmarking: lo hecho como referencia a los demás
  • Observación de la observación: ¿observador del observador?
  • La cuestión de la objetividad
    • La profesionalización de la evaluación (¿la misma tribu?)
    • De la evaluación de la intervención a la evaluación en la intervención

OBJETIVOS DE LA EVALUACIÓN DE LOS PROYECTOS DE INVESTIGACIÓN SOCIAL

  • Objetivos de concesión:
    • Sobre la relevancia
      • Sobre el qué y por qué
    • Sobre la pertinencia
      • Sobre el cuándo, dónde
    • Sobre la viabilidad del proyecto
      • Sobre el cómo
  • Objetivos de legitimación para el apoyo
    • Evaluación intermedia
      • Sobre el para cuándo
  • Objetivos de finalización
    • Evaluación de los resultados del proyecto
      • Sobre el para qué

Definiciones

En términos generales, se entiende por evaluación un proceso integral de observación, medida, análisis e interpretación, encaminado al conocimiento de una acción pública –norma, programa, plan o política-, que permita alcanzar un juicio valorativo, basado en evidencias, respecto a su diseño, puesta en práctica, resultados e impacto (AEVAL)

Hemos caracterizado el trabajo de la evaluación en cuatro tareas: delinear, obtener, informar (reportar) y aplicar (Stufflebeam)

Apreciación sistemática y objetiva de un proyecto, programa o política en curso o concluido, de su diseño, su puesta en práctica y sus resultado. El objetivo es determinar la pertinencia y el logro de los objetivos, así como la eficiencia, la eficacia, el impacto y la sostenibilidad para el desarrollo. Una evaluación deberá proporcionar información creíble y útil, que permita incorporar las enseñanzas aprendidas en el proceso de toma de decisiones de beneficiarios y donantes (OCDE)

 

TIPOS DE EVALUACIÓN

CRITERIOEVALUANDODESARROLLO
TIPO DE EVALUACIÓNEvaluación de proyectosEvaluación de proyectos
Evaluación de programasEvaluación de un programa
Evaluación conjuntaDistintos proyectos, dentro de un programa; de varios programas dentro de un plan
MetaevaluaciónEvaluación de los resultados de la evaluación
CRITERIOACTOR QUE EVALÚADESARROLLO
TIPO DE EVALUACIÓNEvaluación externa
  • No dependencia de organismo demandante
  • No dependencia de ejecutor
Evaluación interna
  • Dependencia organismo demandante
  • Dependencia organismo ejecutor
AutoevaluaciónRealizada por ejecutores
Evaluación independienteAcceso total a la información
Evaluación conjuntaVarios organismos implicados en proyecto y evaluación 

 

CRITERIOOBJETIVODESARROLLO
TIPO DE EVALUACIÓNPARTICIPATIVAIntegrar a partes interesadas en el proyecto
FORMATIVAFormar a grupo de actores
 FASE DEL PROYECTODESARROLLOPROYECCIÓN PRÁCTICACRITERIOS 
TIPO DE EVALUACIÓNEVALUACIÓN EXANTEEVALUACIÓN DIAGNÓSTICA

FILTRAR LA POSIBILIDAD DE PONER EN PRÁCTICA EL PROYECTO

  • INFORMACIÓN PRODUCIDA
  • PERTINENCIA OBJETIVOS 
  • PERTINENCIA DE ACCIONES
  • PERTINENCIA
  • EFICIENCIA
  • FACTIBILIDAD
  • IMPACTO
  • VIABILIDAD
  • SOSTENIBILIDAD
  • IMPACTO
 
  • DOCUMENTACIÓN
  • TRAYECTORIA EQUIPO EJECUTOR
  • CAPACIDAD INSTITUCIÓN
  • EXPERIENCIA TRABAJO CON OTRAS INSTITUCIONES
  • PARTICIPACIÓN EN REDES SOCIALES
 
EVALUACIÓN DE FORMULACIÓN 
EVALUACIÓN DE PROCESOSEVALUACIÓN DE INICIO DE EJECUCIÓN

EVALUACIÓN COBERTURA

EVALUACIÓN ADMINISTRACIÓN

- ALCANCE EN LA POBLACIÓN

- CUMPLIMIENTO PREVISTO

 
EVALUACIÓN DEL TÉRMINO MEDIOEVALUACIÓN DEL SEGUIMIENTO

ANALIZAR LO REALIZADO

RECAPITULACIÓN

  • OBJETIVOS ALCANZADOS
  • PRESUPUESTO CONSUMIDO
 
EVALUACIÓN EXPOSTEVALUACIÓN DE RESULTADOSTRANSFORMACIONES PRODUCIDAS
  • CUMPLIMENTO OBJETIVOS
  • DOCUMENTOS PRODUCIDOS
  • IMPACTO
 

 

 

TÉCNICAS E INSTRUMENTOS DE EVALUACIÓN

  • ETAPA DE IDENTIFICACIÓN/DIAGNÓSTICO
    • Técnicas para la recogida sistemática de información
    • Análisis secundario
    • Producción de registros
    • Encuesta con cuestionario estandarizado
    • Observación participante, entrevistas, técnicas grupales
  • ETAPA DE FORMULACIÓN
    • Técnicas de recogida sistemática de información
    • Técnicas de análisis económico-financiero
    • Estudios Delphi
  • ETAPA DE SEGUIMIENTO
    • Recogida sistemática de información por los evaluadores
    • Observación participante
  • ETAPA EVALUACIÓN DE RESULTADOS
    • Análisis económicos y documentales
    • Informe de evaluación
    • Indicadores de evaluación
    • Conclusiones
    • Recomendaciones