¿Cómo interpretar los resultados de México en PISA?

Por Eduardo Backhoff Escudero (Consejero del INEE )

El 6 de diciembre la Organización para la Cooperación y Desarrollo Económicos (OCDE) dio a conocer a nivel mundial los resultados de PISA 2015, estudio en el cual participaron 72 países, entre ellos México. Por su parte, el mismo día, el Instituto Nacional para la Evaluación de la Educación, dio a conocer los resultados de los estudiantes mexicanos en los tres dominios principales de PISA: Ciencias, Matemáticas y Lectura.

Estos resultados provocaron decenas de notas negativas en la mayoría de los medios de comunicación, donde se acusa a la Secretaría de Educación Pública (SEP) del “desastre”, “fracaso” y “estancamiento” de la educación en el país. 

Debemos partir del hecho de que los datos que arroja PISA son duros, y que nadie en el país puede estar contento con ellos; sin embargo, es importante saberlos contextualizar y compararlos, tanto con otros países similares culturalmente a México, como con respecto a su evolución en el tiempo. Para ello, propongo cuatro aspectos para interpretar equilibradamente los resultados.

Primero, conocer muy bien lo que mide la prueba, para saber de cuáles competencias mínimas se habla. Esto solo se puede hacer revisando los ejemplos de las preguntas que publica la OCDE para cada nivel de logro y respondiéndolas uno mismo. De esta manera se estará en condición de emitir un juicio sobre los altos procesos cognitivos que se les solicitan a los estudiantes y si dichos procesos se enseñan en las escuelas mexicanas. Anticipo que no es el caso, por lo que es falso afirmar que “los estudiantes que no logran el nivel mínimo en PISA (Nivel 2) no aprenden nada”. 

Segundo, estar conscientes de que PISA no evalúa contenidos del currículo mexicano, sino las habilidades intelectuales (razonamiento y solución de problemas) que un joven de 15 años ha desarrollado. Por consiguiente, dichas habilidades son el producto de lo que los estudiantes aprenden tanto dentro como fuera de la escuela. Las investigaciones más optimistas afirman que la escuela es responsable entre 40 y 50% de lo que aprenden los estudiantes. Por lo tanto, los resultados son un indicador del capital intelectual que tiene el país, cuya responsabilidad recae en la sociedad, no solo en el sistema educativo.

Tercero, conocer las limitaciones que tienen las comparaciones basadas en rankings. Comparar los resultados de México en PISA con los de otros países, solo tiene sentido si sus condiciones socioeconómicas y culturales son similares. Se dice sorpresivamente que “México es el último país de la OCDE”, como si ello no fuera de esperarse. Efectivamente es el último en PISA, pero también en prácticamente en todos los indicadores de bienestar social. Por ello, habría que compararse con los países latinoamericanos, que por cierto, respecto a ellos no salimos mal.

Cuarto, conocer los alcances y limitaciones que tienen las comparaciones de un mismo país en el tiempo. México mostró tener una mejoría en Matemáticas, pero no en Ciencias ni en Lectura. Por ello, se ha inferido que “el sistema educativo está estancado”. Los resultados de PISA en Ciencias (2006 a 2015) muestran que, de 63 países considerados para este análisis, 15 retroceden, 36 no presentan cambios y 12 avanzan ¿Podríamos decir que la cuarta parte de los países en el mundo son un fracaso y que 60% está estancado? 

En síntesis, los resultados de PISA deben interpretarse de acuerdo con las condiciones del país. Igualmente, la sociedad debe asumir su responsabilidad de estos resultados. Finalmente, las expectativas sobre los resultados educativos en PISA deben matizarse considerando otros indicadores de bienestar. Por qué esperar que en educación estemos mucho mejor que en salud, seguridad o corrupción. ¿No es esto tener una expectativa falsa de la educación y por ello estar “tan desilusionados” de los resultados de PISA?