The impact of an accountability intervention with diagnostic feedback: Evidence from Mexico

Economics of Education Review Volume 58, June 2017, Pages 123-140

Rafael de Hoyos                   Vicente A. Garcia-Moreno                 Harry Anthony Patrinos

PAE.PNGHighlights

•    We assess a low-stakes accountability intervention in Mexico
•    The main outcomes of interest are national student assessment test scores
•     A difference-in-difference and a regression discontinuity design are used to identify effects
•     Information on results led to significant positive changes in test scores in a short period of time
Abstract: The Mexican state of Colima implemented a low-stakes accountability intervention with diagnostic feedback among schools with the lowest test scores in the national assessment. A difference-in-difference and a regression discontinuity design are used to identify the effects of the intervention on learning outcomes. The two strategies consistently show that the intervention increased test scores by 0.12 standard deviations only a few months after the program was launched. The results indicate that full and wide dissemination of information detailing school quality is critically important.

Keywords: Accountability; Information; Education

 

El impacto de una intervención de rendición de cuentas con la retroalimentación diagnóstica: evidencia de México

Rafael de Hoyos                Vicente A. García-Moreno               Harry Anthony Patrinos

Economics of Education Review Volume 58, June 2017, Pages 123-140

  • Evaluamos una intervención de rendición de cuentas de bajo riesgo en México.
  • Los principales resultados de interés son los resultados de las pruebas nacionales de evaluación de los estudiantes.
  • Se utiliza un diseño de diferencia en diferencia y una discontinuidad de regresión para identificar los efectos.
  • La información sobre los resultados condujo a cambios positivos significativos en los resultados de las pruebas en un corto período de tiempo.

Resumen: El estado mexicano de Colima implementó una intervención de rendición de cuentas de bajo riesgo con retroalimentación de diagnóstico entre las escuelas con los puntajes más bajos en la evaluación nacional. Se utiliza un diseño de diferencia en diferencia y de discontinuidad de regresión para identificar los efectos de la intervención sobre los resultados del aprendizaje. Las dos estrategias consistentemente muestran que la intervención aumentó los resultados de las pruebas en 0,12 desviaciones estándares sólo unos meses después del lanzamiento del programa. Los resultados indican que una difusión completa y amplia de información que detalla la calidad de la escuela es de importancia vital.

Palabras clave: Responsabilidad; Información; Educación

Acknowledgements: The authors gratefully acknowledge funding from the World Bank’s Research Support Budget and the comments of participants at the World Bank’s economics of education seminar. Thanks to Óscar Hernández and staff at the Secretariat of Education of Colima, Mexico, for all the support provided during the evaluation.