Los puntos débiles de PISA que la hacen una prueba inexacta

Cada tres años miles de adolescentes de 15 años realizan una prueba de lectura, matemáticas y ciencia cuyo resultado establece un ranking de países según su competencia. En la edición 2018, Uruguay lidera el ranking latinoamericano en matemática y está segundo en lectura y ciencia. Sin embargo, está por debajo del promedio de la Organización para la Cooperación y el Desarrollo Económicos (OCDE).

A pesar de su influencia en todo el mundo, las pruebas PISA tienen muchos detractores. ¿Cuáles son sus puntos débiles?

Un grupo de profesores y catedráticos de la Universidad de Oviedo (España) hizo un análisis de las razones que llevan a poner en entredicho la fiabilidad de este examen.

En primer lugar, la elaboración de los cuestionarios carece de matices. Cuando se pregunta por conceptos matemáticos como "ecuación lineal", el alumno debe elegir entre 5 opciones:

1) No lo he visto nunca.
2) Lo he visto una o dos veces.
3) Lo he visto varias veces.
4) Lo he visto a menudo.
5) Lo conozco bien, entiendo el concepto.

¿Dónde está el problema? Puede que al alumno le hayan explicado el concepto varias veces y lo haya entendido bien, ¿Demuestra que realmente sabe sobre el tema o creen que tiene suficiente conocimiento de tal concepto?

En segundo lugar, las preguntas deberían de ser aplicables a contextos culturales diferentes. Sin embargo, la relación del índice corregido FAMCONC (familiaridad con los conceptos matemáticos) es muy diferente entre los países europeos o anglosajones que en el resto del mundo. ¿Se aplicó esta técnica de corrección? No, ni ahora ni tampoco en 2015.

En tercer lugar, "PISA señala la importancia de analizar la evolución temporal de sus indicadores. Sin embargo, son frecuentes los cambios en los enunciados y las definiciones de los índices, sin que se explique la causa", señala la investigación.

Y, finalmente, toda investigación tiene resultados inesperados, que conllevan una explicación y fundamentación. Sin embargo, es recurrente que PISA opte por explicaciones sin base en los datos de estudio.