Tras conocer el estudio, que fue encargado a la consultora Pearson, el Ministerio de Educación y el Consejo de Rectores introducirán cambios a la prueba a partir de este año. Desde problemas en la elaboración de preguntas y asignación de puntajes, hasta cuestionamientos a su validez planteó un estudio realizado por la consultora estadounidense Pearson a la Prueba de Selección Universitaria (PSU).
El estudio, de 700 páginas, fue encargado en 2011 por el Ministerio de Educación y el Consejo de Rectores (CRUCh) con el objeto de introducir mejoras a la prueba de admisión que utilizan las 25 universidades del CRUCh y ocho privadas.
Entre los problemas detectados se cuenta la falta de participación de expertos externos al Demre en la elaboración de las preguntas. Además éstas no se testean de manera adecuada, pues la muestra de alumnos que se utiliza en el pilotaje no es representativa y la preguntas pueden ser cambiadas incluso después del testeo. Esto permite que preguntas con algún tipo de sesgo –de género u otra índole– puedan quedar disponibles para ser utilizadas en la prueba.
También hay imprecisión en el cálculo de los puntajes debido a la forma en que se corrigen las preguntas. En este punto, se detectó un alto nivel de omisión entre quienes responden la prueba, mayor que a nivel internacional, por lo que la entidad sugiere reconsiderar el descuento que se realiza de respuestas buenas por cierta cantidad de respuestas malas, ya que ésta no es una práctica habitual en otros países.
Asimismo, el estudio sostiene que los puntajes de la PSU no son comparables entre un año y otro, pues la escala no es equivalente y los márgenes de error de algunas pruebas son elevados. En base a esta conclusión, resulta incorrecto guardar los puntajes por dos años, como se realiza actualmente.
El informe también considera inadecuado usar un puntaje único para las pruebas de Ciencias y recomienda desarrollar pruebas y puntajes separados para Biología, Física y Química.
En cuanto a la validez de la PSU, Pearson constata que la brecha socioeconómica es más alta que a nivel internacional y que existen problemas de sesgo que afectan principalmente a los estudiantes de la modalidad técnico profesional.