Evaluación de Políticas Públicas: Criterios, Tipologías y Herramientas de Gestión

1. Los criterios de evaluación: definición y tipologías

Los criterios de evaluación son principios, normas o ideas que permiten emitir un juicio valorativo sobre una política o programa. Ayudan a clasificar las preguntas de evaluación, asegurando que se cubran todas las dimensiones relevantes de la intervención. Existen tres tipos de criterios:

• Criterios tradicionales: Evalúan aspectos técnicos.
  • Ejemplo: Eficacia, que mide si se han logrado los objetivos.
  • Pregunta de evaluación: ¿Se han alcanzado los resultados previstos de la intervención?
• Criterios vinculados a valores sociales: Incorporan principios éticos o sociales.
  • Ejemplo: Equidad, analiza si la intervención ha sido justa.
  • Pregunta: ¿Se han incorporado medidas para garantizar el acceso a los colectivos más vulnerables?
• Criterios ad hoc: Se crean específicamente para una evaluación concreta.
  • Ejemplo: Credibilidad, mide la calidad y objetividad del proceso.
  • Pregunta: ¿Se han contrastado los datos relevantes con fuentes diversas?

2. Características fundamentales de un informe de evaluación

Un informe de evaluación debe cumplir con requisitos específicos en cuanto a su forma y contenido:

• Contenido: Debe tener una metodología transparente y juicios de valor bien fundamentados en los datos y evidencias recolectadas. Esto permite que el informe sea replicable y que los hallazgos sean verificables.
• Forma: Debe ser claro (legibilidad), tener una estructura lógica (articulación) y basarse en fuentes actualizadas (solidez).

Estas características aseguran la credibilidad del informe, facilitan su comprensión por distintos públicos y aumentan su utilidad para la toma de decisiones y la mejora de intervenciones.

3. Tipologías de evaluación

A continuación se detallan las diversas tipologías de evaluación según distintos enfoques:

1. Atención al paradigma (¿Dónde?)

• Evaluación experimental (positivista): Se centra en los objetivos y en determinar relaciones de causalidad. Su fin es medir qué funciona mejor para alcanzar metas técnicas. Ejemplo: Evaluar si un nuevo sistema de patrullaje redujo exactamente un 10% los hurtos en un barrio.
• Evaluación naturalista (interpretativista): Se enfoca en los impactos y en cómo los actores han experimentado la política. El evaluador actúa como mediador de diversas percepciones. Ejemplo: Entrevistar a víctimas para entender cómo se sintieron con un nuevo protocolo de atención policial.

2. Atención al evaluador (¿Quién?)

• Interna (o autoevaluación): Realizada por el propio personal que ejecuta el programa; su ventaja es la familiaridad con la gestión.
• Externa: Realizada por especialistas contratados, garantizando mayor objetividad e independencia.
• Mixta: Combina equipos internos y externos para sumar ambas ventajas.

3. Atención al momento (¿Cuándo?)

• Ex ante: Se hace tras el diseño pero antes de la ejecución para garantizar que se puedan alcanzar los objetivos.
• Intermedia (in itinere): Durante la implementación para determinar el avance y aplicar medidas correctoras.
• Ex post: Al finalizar el programa, orientada al aprendizaje para el futuro.

4. Función (¿Para qué?)

• Formativa (o de proceso): Tiene un fin instrumental; ofrece información progresiva a los responsables para introducir mejoras sobre la marcha.
• Sumativa (o de resultados): Tiene un fin social y político; permite hacer una valoración global de la utilidad de la política para rendir cuentas.

5. Objeto (¿Qué?)

Se divide en tres grandes bloques:

• Evaluaciones conceptuales o de diseño: Incluyen la de necesidades (primer paso racional), de conceptualización (coherencia lógica) y de evaluabilidad (si la política se puede medir).
• Evaluaciones de gestión del programa: Analizan la implementación, el seguimiento y la cobertura (si llega a la población adecuada).
• Evaluaciones de desempeño: Incluyen la económica (coste-beneficio), de resultados (eficacia sobre beneficiarios directos) e impacto (causalidad y efectos a largo plazo en toda la población).

4. Funciones de la evaluación en el contexto de la gobernanza

En la gobernanza, la evaluación fomenta la interacción horizontal entre el sector público, el privado y la sociedad civil a través de cuatro funciones principales:

1. Uso Político Estratégico y Democrático (Más Democracia y Corresponsabilidad): Su objetivo es la rendición de cuentas (accountability). Favorece la transparencia, dota de legitimidad a la acción del gobierno y fortalece el control ciudadano.
2. Uso Gerencial (Más Calidad en la Gestión): Se centra en optimizar la administración proporcionando información para la toma de decisiones, buscando eficiencia y mejora continua.
3. Uso Académico de Aprendizaje (Más Aprendizaje e Innovación): Genera conocimiento científico sobre qué estrategias funcionan, identifica buenas prácticas e incrementa la capacidad de innovar.
4. Función Dinamizadora (Más Implicación y Coordinación): Promueve la convergencia de puntos de vista, rompe los "compartimentos estancos" de la administración y fomenta la cooperación interdepartamental.

5. Tipos de evaluación según la fase del ciclo de políticas

• Fase de Identificación y Definición del Problema:
  • Evaluación anticipativa: Analiza el contexto político, legal, social y económico.
  • Evaluación de la evaluabilidad: Valora si el diseño permite una evaluación posterior.
  • Evaluación de necesidades: Conoce en profundidad las características y límites del problema.
• Fase de Diseño (Formulación y Adopción de Alternativas):
  • Evaluación de teoría y diseño: Asegura la conexión lógica entre la teoría y los instrumentos.
  • Evaluación de viabilidad (o de contexto): Mapea actores e intereses para identificar amenazas y oportunidades.
• Fase de Implementación (Implantación):
  • Evaluación de la implantación (o de procesos): Compara el diseño original frente a la práctica real.
  • Estudios de seguimiento de programas: Verifican cumplimiento de actividades, costes y cobertura.
• Fase de Evaluación de Resultados:
  • Evaluación de impacto / eficacia: Mide en qué medida los cambios han sido producidos por la política.
  • Evaluación de calidad: Valora la satisfacción de los actores y los beneficios esperados.

6. Detección de problemas en la fase de identificación

Los problemas se detectan a través de diversas fuentes:

• Análisis de datos: Indicadores económicos, sociales o ambientales.
• Quejas y demandas ciudadanas: Consultas, encuestas o redes sociales.
• Medios de comunicación: Difusión de situaciones problemáticas.
• Informes técnicos o académicos: Estudios que evidencian problemas específicos.
• Observación directa: Por parte de funcionarios o expertos.
• Comparación internacional: Contrastar políticas con otros países.

7. Similitudes y diferencias: Marco Lógico vs. Teoría del Cambio

Similitudes: Ambas herramientas buscan entender cómo una intervención contribuye al cambio deseado, establecen relaciones causales y ayudan en el diseño, monitoreo y evaluación de forma sistemática.

Diferencias:

• Enfoque de Marco Lógico (EML): Es un modelo lineal, estructurado y descriptivo. Se centra en actividades, resultados y objetivos con indicadores precisos. Es útil para detectar inconsistencias internas.
• Teoría del Cambio (TdC): Es un modelo sistémico, flexible y no lineal. Busca explicar el cómo y por qué ocurre el cambio, articulando supuestos e hipótesis subyacentes y considerando factores externos.

8. Diferencia entre Árbol de Problemas y Árbol de Objetivos

La diferencia principal es que el Árbol de Problemas analiza una situación negativa, mientras que el Árbol de Objetivos la transforma en una situación positiva a alcanzar.

Composición del Árbol de Problemas (Diagnóstico)

• Tronco: Representa el problema central o focal.
• Raíces: Son las causas que provocan el problema.
• Ramas: Son los efectos o consecuencias negativas en la sociedad.

Composición del Árbol de Objetivos (Solución)

• Tronco: Representa el objetivo general (transformación del problema).
• Raíces: Se convierten en los medios (objetivos específicos y actividades).
• Ramas: Se transforman en los fines o impactos positivos esperados.