¿Puede un programa de matemáticas cambiar realmente el aprendizaje?

¿Qué sabemos sobre el impacto de los materiales y programas de matemáticas en el aprendizaje? La investigación acumulada desde comienzos de este siglo ofrece una conclusión general: los materiales curriculares pueden mejorar los resultados, pero sus efectos suelen ser moderados y dependen en gran medida de cómo se implementan. Además, todavía sabemos mucho menos de lo deseable sobre qué programas funcionan, para quién y en qué condiciones. La revisión de la evidencia disponible permite extraer las siguientes conclusiones:

• La evidencia rigurosa sigue siendo escasa. La mayor parte procede de Estados Unidos y, aun allí, muchos programas ampliamente utilizados nunca han sido evaluados con diseños capaces de estimar de forma convincente su impacto. 
• Obtener evidencia causal es costoso y difícil. Una evaluación rigurosa puede requerir varios años, miles de estudiantes, numerosas escuelas, financiación considerable y centros dispuestos a aceptar que la asignación de los programas se determine de forma aleatoria. 
• Cuando se detectan mejoras, suelen ser moderadas, pero pueden ser relevantes a gran escala. Los meta-análisis sitúan la ventaja media de sustituir unos materiales curriculares por otros alrededor de +0,05 a +0,10 desviaciones estándar (SD). Entre los estudios revisados por What Works Clearinghouse y Evidence for ESSA, la media es de +0,13 SD. Son efectos modestos, pero la comparación no es entre recibir o no recibir enseñanza: el grupo de control continúa utilizando sus materiales habituales. Por tanto, estas cifras representan la mejora adicional atribuible a sustituir una alternativa por otra. Si ambas tienen costes similares, incluso una mejora moderada puede resultar importante cuando alcanza a todos los alumnos. 
• Un mismo programa puede producir resultados distintos según dónde, cómo y contra qué se evalúe. El impacto observado depende de la calidad de la alternativa utilizada por el grupo de comparación, de la prueba empleada para medir el aprendizaje, del tiempo transcurrido desde la intervención y de la calidad de la implementación. Las evaluaciones muy alineadas con el contenido del programa suelen encontrar efectos mayores que las pruebas externas, y parte de las mejoras puede disminuir con el tiempo. 
• Los materiales funcionan mejor cuando van acompañados de formación docente vinculada a la práctica. Los estudios sintetizados por Pellegrini et al. (2021) y Lynch et al. (2019) encuentran medidas de efecto superiores cuando la intervención combina materiales curriculares con acompañamiento y desarrollo profesional (la medida del efecto crece entre +0.08 y 0.10 SD). La evidencia sugiere que entregar buenos materiales no basta: ayudar al profesorado a utilizarlos bien aumenta su impacto.

• El equilibrio entre el coste y el beneficio. Intervenciones intensivas como la tutoría o el trabajo en pequeños grupos obtienen, en promedio, efectos altos. Algo parecido pasa con el coaching. Estas intervenciones requieren, sin embargo, muchos más recursos humanos y son difíciles de extender. Los materiales curriculares acompañados de formación producen efectos menores por alumno, pero pueden llegar a prácticamente todas las aulas y hacerlo con un coste adicional relativamente bajo.