A pesar de la reciente demanda creciente por parte de financiadores y gobiernos, las evaluaciones de impacto rigurosas en América Latina y el Caribe siguen siendo la excepción más que la regla. Muchas evaluaciones de impacto solicitadas son débiles desde el punto de vista metodológico, y por lo tanto, sólo útiles marginalmente en la evaluación de impacto de intervenciones sociales. Otras evaluaciones de impacto presentan metodologías de investigación sólidas en su concepción, pero enfrentan retos institucionales considerables durante puntos clave en las fases de diseño e implementación. Este documento identifica algunas de las barreras que limitan el diseño e implementación de evaluaciones de impacto rigurosas en esta región, así como varios habilitadores para el diseño e implementación exitosos de dichas evaluaciones. El trabajo también da una idea general de algunas prácticas clave para el diseño e implementación de evaluaciones de impacto de alta calidad en América Latina y el Caribe. Usamos una metodología de estudio de caso que combina nuestra experiencia en el diseño e implementación de evaluaciones de impacto en tres programas sociales en progreso o recientes en El Salvador, Jamaica y México.
Cerrar

En años recientes, la comunidad internacional ha expandido sus esfuerzos en evaluación de programas para mejorar la responsabilidad de los proyectos de desarrollo. Este trabajo presenta enfoques para la implementación de métodos modernos de evaluación en los proyectos de electrificación rural tomando en cuenta retos específicos que los investigadores enfrentan en tales intervenciones. El artículo sugiere un enfoque para evaluar los impactos antes de implementar una intervención al hacer encuestas en la región objetivo aún sin electrificación del proyecto y, además, una región ya electrificada. Además de proporcionar evidencia robusta sobre los impactos, los resultados de dichas evaluaciones ex-ante proporcionan ideas para el diseño del proyecto, reduciendo, de este modo, la brecha entre los investigadores y practicantes de la evaluación.
Cerrar

El objetivo de esta investigación es cuantificar la eficiencia en la focalización del Plan de Atención Nacional a la Emergencia Social (PANES) implementado en Uruguay entre el 2005 y 2007, y determinar su impacto en aspectos relevantes como la asistencia a centros de enseñanza, el trabajo infantil y la oferta de trabajo. Para este análisis se utilizó información pública de la Encuesta Continua de Hogares de 2006 y 2007.
Los resultados obtenidos muestran que en el 2007 un 27% de los hogares de la capital Montevideo y del interior urbano que cumplieron con los requisitos para estar en el PANES, no
lograron ingresar a dicho programa. Adicionalmente, menos del 2% de los hogares que no cumplían los criterios de elegibilidad establecidos, recibieron beneficios del programa. Si bien esto permite concluir que en la práctica el grado de focalización del programa no fue alto, los indicadores de focalización presentan una notoria mejoría al compararlos con los del 2006. Además, no se observa discontinuidad entorno a los umbrales determinados en las diferentes regiones para acceder al plan. Esto invalida la aplicación de la metodología de discontinuidad de la regresión para evaluar el impacto del plan.
En relación a la evaluación, las estimaciones realizadas mediante el estimador “propensity score matching” evidencian que el PANES no ha tenido un efecto significativo en la asistencia escolar y en el trabajo infantil. Además, se detectan efectos adversos en la oferta laboral en lo que respecta a las horas trabajadas para hombres y mujeres del interior urbano. Cuantitativamente, para esta zona se observa una reducción del orden del 1,4% en las horas
trabajadas de los hombres y una reducción del 8% en las horas trabajadas de las mujeres que participaron en el PANES. Es de destacar que los efectos en la oferta laboral se observan únicamente en las horas trabajadas y no en la participación laboral. Respecto a la informalidad, se observa un aumento aunque no de magnitud significativa. Para Montevideo no se observan
efectos en la oferta laboral, participación laboral e informalidad.
Este resultado de ausencia de efectos cuantitativamente importantes del PANES no es sorprendente pues podemos calificar al mismo como un programa híbrido entre aquellos que buscan apoyar la alimentación y necesidades básicas de las personas y los que buscan potenciar su nivel de capital humano. Si bien en su ley de creación se encuentran comprendidas las condiciones que debían cumplir los beneficiarios, en la práctica no existe información sobre el grado de cumplimiento de dichas condiciones (Amarante, Burdín y Vigorito 2008).

Finalmente, concluimos que si bien el PANES tuvo el propósito de solucionar problemas serios que tiene la sociedad uruguaya como la indigencia, su resolución fue parcial debido a que se abordaron conjuntamente y en un plan de corto plazo multiplicidad de aspectos como el empleo, asistencia escolar, salud, etc que son difíciles de resolver de manera conjunta. Si bien en el esquema de las políticas de transferencia condicionada a nivel regional se abordan varios aspectos en forma conjunta, estas se centran en un aspecto, generalmente “la acumulación de capital humano”, considerado relevante para eliminar la pobreza intergeneracional.
Cerrar

En este trabajo presentamos estimaciones de impacto que los programas de atención a trabajadores desempleados tienen en el desempeño de sus beneficiarios en México. Enfatizamos la importancia de aplicar metodologías que logren, por un lado, evitar sesgos estadísticos atribuibles a variables no observadas al medir impacto en remuneración y por otro lado que permitan estimar adecuadamente duración en el desempleo y destino de status laboral al salir de éste.
Con la técnica que combina matching o pareo y estimación de doble diferencias (diferencias entre post y pre intervención y entre grupo de tratamiento y control) medimos el impacto que SICAT tiene en hombres desempleados con experiencia laboral previa que participaron en los programas de 2002,2003 y 2004. Los resultados que obtuvimos al aplicar este método no respaldan la hipótesis de que SICAT tenga un impacto positivo en remuneración por hora de los participantes, a tres meses de haber terminado la capacitación ofrecida por este programa. Más aún, cuando el impacto es estadísticamente significativo, como es el caso para años previos a 2004, obtuvimos un efecto contrario al esperado, como si los que participan en el SICAT se estigmatizan en el mercado laboral al grado de que les resulta contraproducente.
Para el programa SAEBE medimos si los beneficiarios de este programa incrementaron su probabilidad de encontrar empleo en el sector formal y si salen más rápido del desempleo cuando, además de un apoyo financiero, se les proporciona servicios de bolsa de trabajo.

Estas estimaciones tienen como finalidad apuntar retos que futuras evaluaciones deben enfrentar para medir de manera más rigurosa y adecuada el impacto que los programas SAEBE y SICAT tienen en sus beneficiarios. Entre éstos destacamos la urgencia de cambiar el diseño de levantamiento de encuestas y de identificación del grupo de control, mejorar la captación de las trayectorias laborales y la necesidad de incorporar consideraciones de equilibrio general en el mercado laboral al medir el impacto de programas que cubren a una proporción significativa de desempleados.
Cerrar