Evaluar una política pública no es solo medir si funciona. También es entender por qué funciona, para quién y en qué condiciones. Para responder a estas preguntas, la AIReF utiliza un enfoque de métodos mixtos: combina el análisis de datos con metodologías cualitativas. Este enfoque permite obtener una visión más completa y útil para la toma de decisiones públicas.
Metodologías cuantitativas: medir impactos y comparar alternativas
Las técnicas cuantitativas nos permiten identificar relaciones causales, estimar impactos, comparar alternativas de política pública y evaluar la eficiencia de las políticas públicas. Entre las principales herramientas que utilizamos se encuentran:
- Métodos de evaluación de impacto como diferencias en diferencias, regresión en discontinuidad, variables instrumentales, métodos de emparejamiento o control sintético
- Modelos de microsimulación para anticipar posibles efectos de cambios normativos e impactos distributivos
- Análisis de eficiencia (fronteras eficientes)
- Evaluaciones coste-beneficio
- Técnicas de aprendizaje automático aplicadas a grandes bases de datos para la identificación y la predicción de posibles comportamientos
Estas metodologías nos ayudan a responder preguntas clave como:
¿Qué efecto tiene una política?
¿A quién beneficia y en qué medida?
¿Es eficiente en relación con sus costes? ¿Existen alternativas más eficientes?
Metodologías cualitativas: comprender los mecanismos, el contexto y la implementación
Los datos cuantitativos no lo explican todo. Las metodologías cualitativas son esenciales para interpretar los resultados cuantitativos y entender el diseño, los mecanismos, las barreras y la implementación real de las políticas. En la AIReF utilizamos:
- Entrevistas en profundidad y grupos focales
- Estudios de caso
- Análisis documental y normativo
- Encuestas y revisión bibliográfica
Además, aplicamos técnicas de análisis como:
- Análisis de contenido y análisis textual
- Análisis de sentimiento
- Codificación y tratamiento de información cualitativa con apoyo de modelos de lenguaje
Este enfoque permite identificar elementos clave que no aparecen en los datos cuantitativos:
Barreras administrativas
Análisis de sentimiento
Codificación y tratamiento de información cualitativa con apoyo de modelos de lenguaje
En el análisis del Ingreso Mínimo Vital, el trabajo cualitativo ha permitido detectar factores explicativos del fenómeno del non take-up.
La inteligencia artificial como herramienta de escalabilidad
La inteligencia artificial ocupa un papel cada vez más relevante en nuestro trabajo, aunque no constituye una metodología en sí misma. En la AIReF la utilizamos como una herramienta transversal de escalabilidad del resto de técnicas y es un facilitador clave dentro de nuestro marco analítico:
Permite analizar grandes volúmenes de información (por ejemplo, normativa o convenios colectivos)
Automatiza procesos de clasificación, codificación y extracción de información
Mejora la escalabilidad de los análisis, tanto cuantitativos como cualitativos
Facilita el desarrollo de herramientas de visualización y cuadros de mandos
La IA mejora la productividad y aumenta nuestra capacidad y alcance de los análisis, manteniendo siempre el rigor metodológico.
Una visión integral para mejorar las políticas públicas
La combinación de métodos cuantitativos y cualitativos permite a la AIReF desarrollar evaluaciones más completas y robustas. Este enfoque integrado ofrece una visión más rica de las políticas públicas, al combinar medición rigurosa con comprensión contextual. Esto permite:
Medir impactos
Entender los mecanismos subyacentes
Formular propuestas más útiles y aplicables
