Proyecto Generasi: Subsidios Condicionados en Bloque para la Comunidad en Indonesia

Researchers:
Junko Onishi
Susan Wong
Fieldwork:
World Bank
Location:
Indonesia
Sample:
3,100 comunidades
Línea de tiempo:
2007 - 2009
Target group:
Rural population
Outcome of interest:
Transparency and accountability
Intervention type:
Incentives
AEA RCT registration number:
AEARCTR-0000332

Policy issue

Recientemente, los gobiernos, organizaciones internacionales y ONGs han estado más interesadas en fortalecer los vínculos entre ayuda para desarrollo y desempeño. Por ejemplo, toda la ayuda que da la U.S. Millennium Challenge Corporation está explícitamente condicionada al cumplimiento de 17 indicadores de buena gobernanza, desde libertades civiles a tasas de vacunación y tasas de educación primaria de niñas. Aunque condicionar la ayuda con el desempeño puede crear incentivos para mejorar el esfuerzo ymovilizarrecursos adicionales, puede tener ciertos riesgos, como problemas de tareas múltiples o cuando el esfuerzo es puesto sólo en los indicadores clave, comprometiendo otras actividades. También existe el riesgo que la ayuda a base del desempeño haga que los presupuestos sean redireccionados a proyectos con más recursos o a zonas con mejor desempeño.

Context of the evaluation

In 2007, the Government of Indonesia launched Generasi (the National Community Empowerment Program— Healthy and Smart Generation), a community block grant program to improve health and education in rural villages. Generasi provided communities with funds they could use for any purpose—from hiring extra midwives to opening new schools—that would improve health and education as measured by 12 performance indicators (see box below). Villages elected 11-member management teams to conduct social-mapping exercises, participate in discussion groups, and consult with health workers and teachers to decide how to spend the funds.

Generasi targeted 12 indicators that donors chose as key markers of progress towards long-term improvements in health and education:

Health Education
Prenatal care visits Primary school enrollment
Distributing iron tablets to pregnant women Primary school attendance
Childbirths with trained midwives Middle school enrollment
Postnatal care visits Middle school attendance
Immunizations
Consistent infant weight gain
Monthly weight checks
Distributing vitamin A pills to children
Three girls in uniforms with backpacks walk outside
Schoolchildren in Indonesia. Photo: World Bank
World Bank

Details of the intervention

To measure the impact of community block grants and the additional effect of incorporating performance incentives, researchers randomly assigned 264 subdistricts, each with about 12 villages, to one of three groups:

Group Number of subdistricts Grant Details
Comparison group 83 No grants
Unconditional grants 88 Community block grants Grant amounts were based on the number of potential beneficiaries—pregnant women and children—in each village.
Incentivized grants 93 Community block grants In the first year, grant amounts were based on the number of potential beneficiaries in each village. Subsequently, 80 percent of funds continued to be divided among villages according to the number of beneficiaries. The remaining 20 percent of funds allocated to each subdistrict formed a bonus pool, which was split among villages according to performance on the targeted indicators. Researchers surveyed households, village leaders, healthcare providers, and school officials 1.5 and 2.5 years after Generasi began. They collected information on the targeted indicators as well as long-term health and education outcomes, including childhood malnutrition and test scores.

Researchers surveyed households, village leaders, healthcare providers, and school officials 1.5 and 2.5 years after Generasi began. They collected information on the targeted indicators as well as long-term health and education outcomes, including childhood malnutrition and test scores.

Results and policy lessons


Impacto en Indicadores de Salud
: Durante los dos años del programa, los indicadores de maternidad y niños - incluyendo visitas prenatales, partos con parteras capacitadas, inmunización infantil, y monitoreo del crecimiento de los niños - eran en promedio 0.03 desviaciones estándares más altas en comunidades con incentivos que en aquellas sin incentivos. Este efecto fue causado más que todo por el incremento en el número de visitas prenatales, el cual fue un 5 por ciento más alto en comunidades con incentivos que en las que no tenían incentivos, y por tasas de vacunación, las cuales eran 3 por ciento más altas en comunidades con incentivos. A pesar que estas diferencias son modestas, el impacto de los incentivos fue mayor en áreas con niveles de prestación de servicios bajos al momento de administrar la línea de base: los incentivos mejoraron algunos indicadores clave por 0.10-0.15 desviaciones estándares en las provincias más pobres, cerca de Java.

Impacto en Indicadores de Educación:No hubo ninguna diferencia entre las comunidades con incentivos y sin incentivos en los 4 indicadores de educación examinados.

Impactos Adversos:Los investigadores encontraron poca evidencia de efectos adversos de los incentivos. No se observaron problemas de tareas múltiples o de manipulación de datos por parte de las comunidades.

Mecanismo del Impacto:Los resultados sugieren que existen dos mecanismos posibles que vinculan los incentivos con los impactos. Primero, parece que los incentivos redujeron en 16 por ciento gastos en útiles escolares y en uniformes e incrementaron gastos en salud por 6.5 por ciento. A pesar de estos cambios, los hogares no eran menos probable de recibir útiles escolares y éstos no eran de menor calidad o valor. Es más, en las zonas con incentivos, los hogares tenían una probabilidad más alta de recibir becas escolares. Esto sugiere que los cambios en el presupuesto de la comunidad fue producto de un gasto más eficiente. Los incentivos también resultaron en un aumento en el trabajo de las parteras, pero no se observaron cambios en la cantidad de trabajo de los profesores de los colegios. Una posible explicación es que las parteras son pagadas por caso mientras que los profesores no.

Análisis de Costo-Efectividad:El desafío en calcular la costo-efectividad del programa es que hay varios resultados posibles. Por esto, los investigadores calcularon los beneficios totales del programa como el número total de "puntos extra" que el programa creaba, utilizando la escala asignada a cada uno de los 12 indicadores para medir desempeño por comunidad. Los investigadores calcularon que el programa Generasi generó un punto extra adicional por cada US$8-US$11. Al traducir esto a resultados, esto quiere decir que el costo de prevenir que un niño sea desnutrido es de US$384-US$528 y el costo de matricular a un niño adicional en la escuela es de US$200-US$275. Cuando los costos adicionales del desempeño son aislados, el costo de los incentivos mismos viene a ser de US$0.60 por punto (US$29 por cada caso adicional de malnutrición prevenido). Esto sugiere que aunque el programa en sí no es particularmente costo-efectivo, proveer incentivos es una forma de hacer un programa de subvenciones normal más costo-efectivo. Agregar incentivos a programas de subvenciones ya existentes puede ser una forma costo-efectiva de mejorar la efectividad de la ayuda para el desarrollo.

Olken, Benjamin, Junko Onishi, and Susan Wong. 2014. "Should Aid Reward Performance? Evidence from a Field Experiment on Health and Education in Indonesia." American Economic Review: Applied Economics 6(4): 1-34.