Sobre el uso de la evidencia y la validez externa en la evaluación de intervenciones sociales: una mirada crítica

El pensamiento de diseño y la evaluación de políticas e intervenciones sociales: hacia un diálogo "realista"

“…Ahora bien, pensando en la evaluación de intervenciones sociales -que es el foco de reflexión de este artículo-, el debate sobre diferentes formas de inferencia permite identificar una primera coincidencia entre los dilemas metodológicos de ese campo disciplinario y las virtudes del pdd para ayudar a resolverlos. Por ejemplo, los métodos (cuasi)experimentales -asociados al paradigma de la evaluación de impacto cuantitativa-tienden a reproducir una lógica deductivista de inferencia, al reducir las explicaciones sobre efectos estadísticos de un programa a axiomas racionalistas, provenientes de la economía neoclásica (Parra, 2021). Por su parte, planteamientos metodológicos que privilegian diseños más cualitativos, como la evaluación constructivista o la denominada teoría fundamentada, tienden a reducir las explicaciones del cómo y el porqué de los resultados de una evaluación a interpretaciones inductivas que hacen investigadores sobre diferentes fuentes de información empírica (Tavory & Timmermans, 2014;Pawson & Tilley, 1997).…”

“…Esto, en línea con críticas al pensamiento abductivo esbozadas desde la literatura y los principios del rc. Este segundo es un paradigma de investigación que cuenta en la actualidad con una influencia significativa en el desarrollo teórico y conceptual de disciplinas como la sociología y la ciencia política (Danermark et al, 2019;Porpora, 2015), y en campos de investigación aplicada como, precisamente, la evaluación de intervenciones sociales (Fontaine, 2020;Brousselle & Buregeya, 2018;Parra, 2021;Jagosh, 2020;Pawson, 2013).…”

“…Este punto no es trivial; si se parte del principio de que evaluar equivale a buscar evidencia sobre relaciones causa-efecto (ej. entre intervenciones educativas e indicadores de desempeño escolar), es ciertamente deseable que una estrategia de evaluación esté expresamente fundamentada en argumentos epistemológicos que permitan resolver interrogantes causales (Parra, 2021). 6 Y dado que, como lo ilustrará el ejemplo al final de la sección, desde el paradigma realista ya existe una propuesta explícita de evaluación -la denominada Evaluación Realista (er)-, en lugar de avanzar con un desarrollo propio de una forma específica de evaluar -como se buscó a través en el primer ejemplo discutido-, la intención en este caso consiste en proponer que la er representa, en sí misma, una aplicación del pdd (con algunas adendas) en el contexto de la evaluación de intervenciones sociales.…”

“…frente al estudio de relaciones causa-efecto en la sociedad) y el campo de la evaluación de intervenciones sociales. De hecho, en años recientes se ha venido consolidando una tradición denominada Evaluación Realista (er), presentada por sus múltiples exponentes como una alternativa de escuelas dominantes de la evaluación -incluyendo en este repertorio a la denominada evaluación pragmática- (Parra, 2021;Astbury, 2013;Pawson & Tilley, 1997;Jagosh, 2020) y que se fundamenta en la puesta en marcha de estrategias de indagación informadas por los principios epistemológicos de la retroducción. Así lo releva el siguiente pasaje escrito por uno de los representantes más influyentes de esta tradición:…”

“…Piénsese, por ejemplo, en los llamados a construir repositorios de evidencias científicas (sobre medidas estandarizadas de política que funcionan), comunes en discursos dominantes sobre la política basada en evidencia(Parra, 2021).…”