Antecedentes

- Schleicher. A. (2016). Desafíos para PISA. RELIEVE, 22(1), art. M13.
 Recuperado de: https://doi.org/10.7203/relieve.22.1.8429

El Programa para la Evaluación Internacional de Alumnos (PISA) proporciona un marco en el que más de 80 países colaboran para construir métricas globales avanzadas para explorar los conocimientos, habilidades y atributos del estudiantado. El diseño de las evaluaciones plantea importantes desafíos conceptuales y técnicos, como el éxito del aprendizaje. Más allá de una base conceptual sólida, PISA necesita cumplir una serie de exigencias a veces contradictorios. Los/as administradores de escuelas, autoridades normativas y los docentes deben ser capaces de utilizar esta información de la evaluación para determinar cómo crear mejores oportunidades para el aprendizaje de los estudiantes. Las evaluaciones también deben proporcionar retroalimentación productiva, con niveles apropiados de detalle, para potenciar las decisiones de mejora y rendición de cuentas, en todos los niveles educativos. De hecho, además de evaluar la lectura, las matemáticas y la ciencia como competencias clave, PISA va incorporando progresivamente también algunas de las competencias cognitivas más amplias, sociales y emocionales.

- González-Mayorga, H., Vidal, J., Vieira, M.J.(2017). El impacto del Informe PISA en la sociedad española: el caso de la prensa escrita. RELIEVE, 23(1), art. 3.
Recuperado de: https://www.uv.es/RELIEVE/v22n1/RELIEVEv22n1_M15.pdf

En este trabajo realizamos una evaluación metodológica de las evaluaciones internacionales PISA, presentando un análisis crítico de sus deficiencias y limitaciones. Presentamos una revisión metodológica o meta-evaluación de los múltiples informes PISA, en un intento de demostrar la validez plausible de las inferencias que PISA mantiene, teniendo en cuenta una serie de limitaciones metodológicas tales como: una lógica incoherente, toma de muestras opacas, diseño evaluativo inestable, instrumentos de medición de validez cuestionables, el uso oportunista de las puntuaciones transformadas por la normalización, la confianza reverencial en la significación estadística, la ausencia de estadísticas sustantivamente importantes centradas en las magnitudes de los efectos, una presentación problemática de los hallazgos e implicaciones cuestionables extraídas de los resultados para las prácticas y las legislaciones educativas. Recae sobre PISA la responsabilidad de proporcionar y demostrar mayor rigor metodológico en los futuros informes técnicos y la consiguiente necesidad de ser cuidadosos para no mostrar inferencias sin fundamento a partir de sus hallazgos.

- Jornet, J.M. (2016). Análisis del Proyecto PISA como evaluación internacional. RELIEVE, 22(1), art. M1.
Recuperado de:  https://doi.org/10.7203/relieve.22.1.8293

En este artículo el objetivo es realizar un análisis global del Proyecto PISA como programa de evaluación internacional. Asimismo, se analizan características metodológicas de los procesos métricos que sustentan los instrumentos que se utilizan en el proyecto: las pruebas de logro y los cuestionarios de contexto. Se identifican las fortalezas y debilidades del proyecto, en diversas áreas, desde el Diseño y validación del proyecto como programa de evaluación internacional, sus usos y modos de comunicación de resultados, hasta las características métricas de sus instrumentos. Se proponen alternativas para optimizar el uso del proyecto en general y en los países involucrados en particular.  Se concluye que se trata de un proyecto que, por su calidad metodológica e impacto socio-político es valioso, si bien tiene diferentes aspectos que podrían mejorarse -tanto como programa de evaluación, como en sus fundamentos de medición educativas- para que pudiera aportar informaciones de mayor calidad y que pudieran orientar decisiones de mejora.

- Solano-Flores, G. y Milbourn. T. (2016). Capacidad evolutiva, validez cultural y validez consecuencial en PISA. RELIEVE, 22(1), art. M2.                                                                          
Recuperado de: http://dx.doi.org/10.7203/relieve.22.1.8281 

La evaluaciones internacionales de estudiantes han desempeñado un papel cada vez más importante en la política educativa. Estas comparaciones internacionales basadas en pruebas generan información valiosa sobre el rendimiento del estudiantado de cada país participante y los factores sociales y contextuales asociados. Una imagen compleja de los factores culturales, económicos y sociales que dan forma a la participación de PISA empieza a emerger. Nuestro objetivo es entender la relación entre la capacidad evaluative nacional y la forma en que los países participan en estas comparaciones internacionales. Proponemos un marco conceptual para examinar la capacidad evaluativa como clave para abordar dos aspectos de la validez: cultural y consecuencial. Asimismo, se discuten las múltiples facetas de la capacidad evaluativa como condiciones para abordar la validez cultural y validez consecuencial en comparaciones internacionales.