Pruebas Pisa PISA (Programme for International Student Assessment) es un estudio internacional comparativo de evaluación educativa liderado por la Organización para la Cooperación y el Desarrollo Económico OCDE. Tiene como fin valorar las competencias en las áreas de lectura, matemáticas y ciencias de los estudiantes de 15 años que cursan entre 7° y 11°, donde se analizan los resultados res ultados en función de variables de d e contexto y de sistemas si stemas escolares. Colombia participó en PISA 2006 (énfasis en ciencias) y 2009 (énfasis en lectura). Para el año 2012 La Fundación Luker en convenio con el Municipio de Manizales y el Instituto Colombiano para el Fomento de la Educacion ICFES, implementará las pruebas "PISA 2012" con énfasis en matematicas en la ciudad de Manizales teniendo teniend o dentro de la muestra a los estudiantes pertenecientes a colegios de Escuela Activa Urbana. “Los resultados de PISA han sido inquietantes para muchos países. Algunos han celebrado y otros han lamentado esos resultados, pero pocos han permanecido indiferentes. El gran
desafío está, sin duda alguna, en salir de las reacciones momentáneas y pasar a la más laboriosa pero prometedora tarea de analizar a fondo los resultados de las evaluaciones, y empezar a diseñar y poner en práctica políticas públicas adecuadas a la atención de los problemas descubiertos. Varios de esos problemas tienen que ver, seguramente, con las escuelas, pero muchos otros se relacionan también con las condiciones de vida de las familias, el acceso a medios de comunicación de calidad, el adecuado funcionamiento y la difusión de las bibliotecas públicas, y otras muchas cosas. En particular, ha sido dramático descubrir que segmentos importantes de la población estudiantil de algunos países europeos se encontraban en el nivel más bajo de evaluación de PISA, y que este fenómeno está estrechamente ligado con la migración. Los hijos de inmigrantes, en Alemania y otros países, muestran resultados muy inferiores al resto de la población. La realización de PISA y su distribución entre los miembros de la OCDE y algunos países adherentes a la iniciativa ya ha tenido resultados importantes: los gobiernos y la opinión pública han volcado su atención en el tema de la educación y nadie soslaya su prioridad; se reconoce claramente el vínculo entre la calidad de la educación y el progreso de los países, y se ha visto, objetivamente, la grave desigualdad en opciones de educación en la comunidad internacional y dentro de cada país.” Algunos resultados resultados relevantes de la evaluación de 2009. Pueden ser un aviso para el mundo occidental: Corea y Finlandia son los países de la OCDE con mejor rendimiento escolar (Lectura comprensiva, matemáticas y ciencias). Sin embargo, China (Shanghái) va muy por delante de los anteriores. También están arriba en las diversas clasificaciones Hong-Kong Singapur y
Canadá. Después de Finlandia, los países europeos con mejores resultados medios son Países Bajos, Bélgica, Noruega, Estonia, Suiza, Polonia, Suecia y Alemania (que figuran entre los 20 primeros). España no ha sacado resultados brillantes y no entra en los treinta primeros. Le preceden la mayoría de los países europeos, incluso Portugal. Hay que preguntarse por qué un pequeño país como Finlandia consigue estar muy por encima de países grandes desarrollados…
Los autores del Informe sacan ellos mismos algunas conclusionesinteresantes: Los sistemas de educación de mejor rendimiento dispensan una enseñanza de calidad a todos los alumnos sin distinción, independientemente de su condición socioeconómica. Los mejores sistemas de educación son los que conceden una mayor autonomía individual a los establecimientos en la elaboración de los programas y políticas de evaluación. En los países de la OCDE, en general los establecimientos privados obtienen resultados análogos a los alumnos de establecimientos públicos. Los sistemas de educación con mejores resultados tienden a dar más importancia al salario de los enseñantes y no a la reducción del tamaño de las clases. Los alumnos desfavorecidos tienen a veces más profesores a su disposición pero estos no son necesariamente de la mejor calidad. El ambiente familiar influye sobre el éxito escolar, y la escuela parece en muchas ocasiones reforzar este impacto. Vivir en un entorno socioeconómico desfavorecido no lleva necesariamente consigo malos resultados escolares, pero el perfil socioeconómico de los alumnos y de los establecimientos de enseñanza tiene con toda evidencia un impacto importante en el rendimiento. Los alumnos que, independientemente de su entorno socioeconómico, frecuentan un establecimiento en los cuales el grueso de los alumnos es más favorecido, tienen tendencia a obtener resultados más altos que alumnos inscritos en un establecimiento donde el grueso es más desfavorecido. En los países de la OCDE, los alumnos que proceden de la inmigración llamada de primera generación, o los que han nacido en el extranjero de padres nacidos en el extranjero, tienen unos resultados medios más bajos que los autóctonos. Los alumnos que frecuenten un establecimiento urbano tienen mejores resultados que los otros. Los alumnos que viven en una familia monoparental tienen resultados algo peores que los que viven en otra estructura familiar. En la OCDE, la proporción de los alumnos que leen diariamente por placer ha disminuido en los últimos años. En todos los países, los alumnos que más gusto cogen a la lectura sobrepasan con mucho en lectura comprensiva a los alumnos a los que les gusta menos. Y las chicas ganan en esto a los chicos en todos los países participantes, porque en general a los chicos les gusta menos leer. Factores como la predisposición, el temperamento, la presión de los demás y la socialización contribuyen aparentemente a explicar porqué los chicos se interesan menos a la lectura, pero es posible animar a los chicos a leer con más gusto. Los últimos años esta diferencia entre las chicas y las chicas ha aumentado.
(En este último punto conviene remarcar que antes de saber escribir bien hay que saber leer bien. Es fundamental, porque por mucho que uno sabe y buenas notas saca en matemáticas y ciencias, si no sabe comunicar sus conocimientos por escrito, de poco le sirven. Y a los chicos: ¡Leer más y menos play station! Mi nieta está leyendo ahora los libros que a su madre y a sus tías les gustaban tanto cuando tenían su edad. Para conservar estos tesoros sirve el camarote…) En las dos últimas décadas, el número de países que participa en evaluaciones internacionales de logro educativo para obtener información sobre el diseño y mejora de sus políticas educativas ha ido aumentando signifi cativamente. Sin embargo, esta participación es uno de los tem as más controvertidos en el campo educativo2 , en tanto que el valor y validez de este tipo de evaluaciones es aún materia de intensas discusiones en los medios académicos PISA se sustenta en un enfoque abierto de la evaluación, es decir, no se basa en los marcos curriculares nacionales. De allí que PISA no esté diseñado para evaluar el nivel de aprendizaje de los contenidos específi cos establecidos en los currículos ni aporta información sobre el grado en que este se está
implementando. Los instrumentos que utiliza PISA se “diseñan a partir de un conjunto de estándares
de contenido y desempeño, elaborados por un grupo de e xpertos y especialistas en diferentes áreas de conocimiento que se consideran imprescindibles para la adecuada inserción de los jóvenes en la sociedad y en el mundo laboral de hoy”
El Programa Internacional para la Evaluación de Estudiantes (PISA) PISA se concibe como un programa que se caracteriza principalmente por tres aspectos: i) establecer un marco conceptual comprensivo
y riguroso para evaluar lectura, matemática y c iencia; ii) explorar habilidades y características de los estudiantes que van más allá de los contenidos propiamente escolares; y iii) analizar las características de los sistemas, esc uelas y estudiantes que se asocian a los resultados escolares (OCDE 2008). Una de las características esenciales de PISA es su regularidad, es decir, se trata de un programa diseñado en tres ciclos evaluativos de tres años cada uno, con la fi nalidad de hacer un seguimiento al progreso
educativo de los países participantes (UMC 2002). En cada ciclo se 12 El lector interesado en profundizar en las características de PISA puede revisar las distintas publicaciones que hay al respecto en su página web: http://www.pisa.oecd.org Los instrumentos que utiliza PISA se diseñan a partir de un conjunto de estándares de contenido y desempeño que se consideran imprescindibles para la adecuada inserción de los jóvenes en la sociedad y en el mundo laboral de hoy. 001_28 PISA.indd 9 1_28 PISA.indd 9 110/23/09 6:38:47 PM 0/23/09 6:38:47 PM10 Serie: La educación del futuro estudia en profundidad una de las áreas evaluadas, que se traduce en la aplicación de un mayor número de ítems del área privilegiada en relación con las otras dos, lo que permite reportar los resultados de
dicha área en términos de subescalas13 y de niveles de competencia. Nuestro país participó en el primer ciclo de evaluación en el año 2001, y se ha vuelto a reintegrar para el ciclo 200914. En ambos casos el énfasis de la evaluación ha estado centrado e n la lectura. Quizá una de las características más importantes de PISA se a “el
innovador concepto de competencia (literacy), que [introduce] y que se refi ere a la capacidad de los alumnos de aplicar sus conocimientos y habilidades en áreas
académicas fundamentales y de analizar, razonar y comunicar efi cazmente c uando plantean, resuelven e interpretan problemas relacionados con distintas situaciones” (OCDE
2005: 20). Esta noción de competencia supone abandonar la visión dicotómica que ha imperado en el ámbito educativo, y al hablar de “niveles de competencia” se asume la idea de que las personas desarrollan
de manera progresiva sus conocimientos, destrezas y habilidades en distintos contextos a lo largo de la vida. En tal sentido, PISA evalúa los conocimientos y habilidades de los estudiantes como un contínuum. Dicho enfoque, entonces, no permite responder preguntas de si los estudiantes saben o no leer, sino que aporta información sobre el tipo de habilidades y destrezas que ponen e n juego los estudiantes al leer y e l grado en que las han adquirido. En tal sentido, un elemento relevante de PISA 2009 es la introducción de un conjunto de ítems de menor difi cultad que permitirá describir lo que saben, comprenden y pueden hacer los
estudiantes de países que mostraron un bajo nivel de desempeño en lectura. Como es conocido, en el ciclo 2000 una proporción importante de estudiantes de los países participantes –pero en particular en los países que
no pertenecían a la OCDE15 – se ubicó en el grupo por debajo del primer nivel de competencia establecido en lectura, lo que no permitía
describir los conocimientos y habilidades que estaban asociados 13 Por ejemplo, para el caso de lectura, las subescalas establecidas son: i) recuperación de información, ii) interpretación de textos y iii) refl exión y evaluación.
14 Es decir, no participó en el 2003 ni en el 2006, que tuvieron como énfasis la evaluación de competencias matemáticas y científi cas, re spectivamente.
15 En el caso del Perú, de los cinco niveles de competencia considerados, e l 54% de los estudiantes se ubicó por debajo del nivel 1. Dicho enfoque aporta información sobre el tipo de habilidades y destrezas que ponen en juego los estudiantes al leer y el grado en que las han adquirido. Esta noción de competencia supone abandonar la visión dicotómica que ha imperado en el ámbito educativo. 001_28 PISA.indd 10 1_28 PISA.indd 10 110/23/09 6:38:48 PM 0/23/09 6:38:48 PM11 Adicionalmente, PISA estudia en cada ciclo evaluativo otras habilidades y características de los
estudiantes de 15 años, tales como sus actitudes hacia la lectura, la matemática y la ciencia. Importancia de PISA 2009 a dicho desempeño. Una razón adicional para incluir este tipo de ítems –más fáciles – es que la experiencia de los e studiantes con menor nivel de desempeño sea más satisfactoria16 . Un aspecto importante de PISA es que se aplican diferentes cuadernillos a los estudiantes evaluados. Cada cuadernillo está organizado por bloques de ítems pertenecientes a las tres áreas evaluadas, que, a su vez, tienen ítems únicos e ítems en común con los otros cuadernillos. Los bloques están distribuidos en los cuadernillos en distinto orden, de manera que no siempre queden al inicio o al fi nal en todos
los cuadernillos en los que aparecen. Este diseño, llamado Bloques Incompletos Balanceados, permite, por un lado, que los estudiantes se enfrenten a un número razonable de preguntas que sirvan para medir su desempeño de manera adecuada, evitando el factor cansancio, y por otro lado, que se logre evaluar todo el espectro de conocimientos, capacidades y habilidades que se especifi can e n el marco conceptual de la evaluación. No obstante, es preciso tener en cuenta que este diseño, además de otras consideraciones técnicas17, tiene algunas implicancias, como el hecho de que no permite reportar resultados a nivel individual; es decir, PISA no está diseñada para obtener resultados a nivel de escuela o de estudiante evaluado. Adicionalmente a la evaluación de las áreas de lect ura, matemática y ciencias, PISA estudia en cada ciclo evaluativo otras habilidades y
características de los estudiantes de 15 años, tales como sus actitudes hacia la lectura, la matemática y la ciencia18, sus concepciones sobre sí mismos, las estrategias que siguen en su proceso de aprendizaje, su sentido de pertenencia con la escuela, entre otros. Con el fi n de recoger información sobre el contexto en que se desenvuelven los estudiantes
evaluados y de estimar el aporte de los factores que se asocian a sus resultados, PI SA utiliza un conjunto Los Bloques Incompletos Balanceados permiten evaluar todo el espectro de conocimientos, capacidades y habilidades que se especifi can en el marco
conceptual de la evaluación. 16 Es importante destacar la conformación del Gr upo Iberoamericano de PISA, que está integrado por Argentina, Br asil, Chile, Colombia, España, México, Panamá, Perú, Portugal y Uruguay, cuyo propósito es fomentar la co laboración entre los países de Iberoamérica que participan en PISA. Este grupo elaboró un conjunto de ítems que fueron seleccionados por PISA, y que se monitorearon en el ciclo 2009. 17 Entre otros, se puede señalar el carácter muestral de la evaluación, el hecho de evaluar a un máximo de 35 estudiantes por escuela. 18 Por ejemplo, en el 2006 la actitud de los estudiantes hacia la ciencia fue estudiada a través de un conjunto de preguntas que buscaban indagar sobre i) e l interés en la ciencia, ii) la aceptación del pensamiento científi co como vía de
conocimiento y iii) la responsabilidad hacia el uso de los recursos y e l medio ambiente. 001_28 PISA.indd 11 1_28 PISA.indd 11 110/23/09 6:38:48 PM 0/23/09 6:38:48 PM12 Se rie: La educación del futuro de cuestionarios dirigidos a los estudiantes y a los directivos de las instituciones educativas de los países participantes. A través de estos instrumentos busca obtener información sobre las condiciones económicas, sociales, culturales y familiares de los estudiantes, además de las características antes señaladas, así como acerc a de la calidad de los recursos fi nancieros, materiales, humanos de las escuelas, las
características institucionales, las prácticas directivas, entre otros. Los programas de capacitación deberán ayudar al docente a ampliar sus concepciones acerca de la lectura y sus criterios para la selección de textos y preguntas adecuados para desarrollar la comprensión lectora de los estudiantes. De hecho una información importante que proveen los
resultados de PISA está referida a evaluar en qué medida los sistemas educativos están garantizando una distribución equitativa de las oportunidades de aprendizaje. Dichas evaluaciones “pueden ser un método
efectivo de concentrar la atención de los alumnos en los resultados de aprendizaje que se valoran, promoviendo razonamientos y refl exiones de mayor
nivel de complejidad [...] y estimulando a los estudiantes a alcanzar niveles de logro aun mayores”.
Las decisiones de política educativa debieran ser valoradas por la medida en que se
estén cumpliendo estos objetivos. Esta información, sumada a otras, proporcionará un insumo fundamental para hacer una evaluación objetiva de las políticas educativas aplicadas, y del funcionamiento del sistema durante este periodo. La participación en estos proyectos puede ser valiosa para los países, incluso para los países en desarrollo, siempre y cuando se tomen ciertas previsiones con respecto a las características técnicas de las pruebas y a las condiciones políticas e institucionales para su aplicación.
Adicionalmente, PISA estudia en cada ciclo evaluativo otras habilidades y características de los estudiantes de 15 años, tales como sus actitudes hacia la lectura, la matemática y la ciencia. Los Bloques Incompletos Balanceados permiten evaluar todo el espectro de conocimientos, capacidades y habilidades que se especifi can en el marco
conceptual de la evaluación. Una de las características esenciales de PISA es su regularidad, es decir, se trata de un programa diseñado en tres ciclos evaluativos de tres años cada uno, con la fi nalidad de hacer un
seguimiento al progreso educativo de los países participantes. Esta noción de competencia supone abandonar la visión dicotómica que ha imperado en el ámbito educativo. Las evaluaciones internacionales sobre educación constituyen esfuerzos para obtener información confi able
y comparable, con el fi n de que puedan
ser utilizados como insumo en el diseño y mejoramiento de políticas educativas. Cada evaluación ha supuesto un aprendizaje que ha permitido enriquecer y mejorar el diseño y elaboración de los instrumentos
que buscan evaluar el rendimiento estudiantil Un buen sistema de evaluación debe defi nir claramente las
preguntas que busca responder y los usos que se pretende dar a sus resultados. 3 Es importante tener en cuenta que esto reduce las tensiones y dilemas que enfrentan los sistemas de evaluación, pero no los desaparece del todo. Un sistema de evaluación debe buscar ofrecer información complementaria a través de los distintos estudios que lleve a cabo. La medición de la calidad educativa es uno de los principales temas en la agenda educativa mundial en los últimos 20 años. Los t écnicos y los responsables de la educación de cada país han ido tomando conciencia de la nece sidad e importancia de evaluar los sistemas educativos y los niveles de aprendizaje de los estudiantes. La prueba PISA, la más conocida internacionalmente, está siendo aplicada el 2009 a adolescentes de más de 60 países. Esta es la segunda vez en la que participa el Perú, y el área principal de la evaluación es la comprensión lectora, tal como ocurrió en el 2000 y 2001.
