2023-11-22
Venimos de entrenarnos en métodos de inferencia causal aplicados a la política pública durante 9 semanas.
Hoy daremos un vistazo al el entramado de organizaciones y recursos que navegarán cuando tengan que recabar/producir evidencia rigurosa acerca de algún programa o política pública.
Al final les dejo unos enlaces a tutoriales sobre Control Sintético y Regresión Discontinua en R.
Tengo que diseñar un programa para disminuir el ausentismo escolar en mi Jurisdicción.
Estoy haciendo un ensayo acerca del impacto del uso de Letrinas en distintos indicadores de salud y desarrollo económico.
Trabajo en un Banco de Desarrollo y tenemos un fondo destinado a mejorar el acceso al agua potable.
Quiero ver resultados de programas relacionados a estos temas en lugares símilares para ver que funciona mejor. ¿Donde empiezo?
¿Por qué necesitamos la evidencia y quién financia su producción?
¿Quiénes producen evidencia?
¿Cómo se presenta la evidencia?
¿Donde puedo encontrar y contrastar la evidencia?
Los aprendizajes de hoy sirven para corrregir los programas de mañana. De hacerse bien, los retornos de la corrección excederán los costos del estudio.1
Esta es una lista de algunos fondos que colaboran constantemente con esfuerzos para producir evidencia sobre políticas y programas:
Federal Ministry for Economic Cooperation and Development (BMZ).
Bancos de Desarrollo Multilaterales (Banco Mundial, BID, CAF, etc).
Otros (Gobiernos, Agencias de Desarrollo, ONU, ect).
Bancos de Desarrollo Multilaterales.
Centros de investigación, ONGs y Think Tanks.
Gobiernos nacionales y regionales. Ejemplos en Argentina.gob.ar
Insituciones cómo el Banco Mundial, el BID, y CAF cuentan con grupos de investigación que evalúan la efectividad de varios de los programas financiados y comparten la evidencia con la comunidad.
United Nations Development Program (UNDP) Independent Evaluation Office.
Muchos otros equipos en universidades e instituciones a nivel mundial.
Ordenadas de menor a mayor robustez:
Reportes y documentos: Publicados sin la revisión minuciosa de pares o jurados.
Evaluaciones de impacto: Con diseños experimentales aprobados por una mesa de revisión, con aplicación y resultados revisados por pares.
Revisiones sistemáticas y meta-análisis: Recopilación académica de protocólo transparante con aplicación y resultados revisados por pares.
Daremos un tour por el Hub de Evidencia de 3ie, una herramienta espectácular para encontrar evidencia sobre programas en diversas áreas del desarrollo económico de forma efectiva y ordenada.
Hacé click acá y acompañame: https://www.3ieimpact.org/evidence-hub
DIME Analytics: Recursos abiertos para la evaluación de programas.
UNDP Evaluation Resource Center: Repositorio de evaluaciones de proyectos de la ONU y recursos abiertos para la evaluación de programas.
Argentina.gob.ar | Banco de Evaluaciones de Políticas Públicas: Evaluaciones realizadas por y para los principales organismos de la Administración Pública Nacional.
Traeremos invitados para sostener una discusión acerca de evaluación de proyectos en la práctica.
Piensen en algún programa en el que hayan participado y cómo les gustaría evaluarlo:
¿Qué indicador te gustaría ver influenciado por el programa? ¿En que dirección?
¿Cúal hubiese sido el experimento ideal para evaluarlo?
¿Qué tipo de estimación podrías obtener con los datos que, bajo tu conocimiento, existen acerca del programa?
En tu opinión: ¿Valdría la pena haber recolectado los datos para hacer la evaluación? ¿Qué porcentaje del presupuesto del proyecto te sentirías cómodo destinando a la misma?
Hablaremos de estas y otras cosas.
Les comparto una explicación de los diseños junto a bits de código en R para su aplicación.
Control Sintético: The Effect by Nick Huntington-Klein, Capítulo 21. Muy útil para evaluar políticas a nivel país de forma retrospectiva (o en cualquiera donde no tengas sujetos de control.)
Regresiones discontinuas (RDD): The Effect by Nick Huntington-Klein, Capítulo 20. Muy útil para anlizar programas o políticas en los que se realiza la admisión (tratamiento) en función a un punto de corte (edad, calificaciones, zonas limítrofes, etc.)
Estoy a la orden en cdaboincontreras@udesa.edu.ar