domingo, 16 de mayo de 2010

PISA Y LA EVALUACIÓN. ESPEJO O ALIMENTO

Resumen

Del 23 al 26 de noviembre, tuvo lugar en La Palma al Simposio Internacional PISA a examen -cambiar el conocimiento, cambiar las pruebas y cambiar las escuelas-. El autor, que participó en el mismo, describe y extrae conclusiones de la prolongada y fructífera conversación entre especialistas de la máxima solvencia, llegados de todo el mundo, de la mano de CESE -Comparative Education Society in Europe- y de su presidente, el palmero Miguel A. Pereyra.


En La Palma

Del 23 al 26 de noviembre, hemos tenido la benéfica oportunidad de asistir en La Palma al Simposio Internacional PISA a examen -cambiar el conocimiento, cambiar las pruebas y cambiar las escuelas-. Unos cuantos privilegiados, entre los que me cuento, hemos sido testigos de una prolongada y fructífera conversación entre especialistas de la máxima solvencia, llegados de todo el mundo, de la mano de CESE -Comparative Education Society in Europe- y de su presidente, el palmero Miguel A. Pereyra.


Ha resultado una ocasión estimulante para el aprendizaje, la reflexión y la clarificación. Sería una pretensión fuera de cualquier posibilidad de éxito intentar extractar las líneas maestras de ese interesantísimo diálogo -ojalá tuviera quien suscribe talento suficiente para intentarlo- pero es que, además, sería un trabajo sin sentido: no tardarán en publicarse los textos completos de las ponencias y, además, para suerte nuestra, se publicarán antes en castellano. Vaya por delante nuestra invitación a una lectura que, seguro, les resultará a todos de sumo provecho.


No me resisto, con todo, a felicitar desde estas líneas el excelente trabajo del presidente de CESE en la confección del Simposio. La estructura y el orden de los elementos que iban apareciendo en escena -y organizaban, por tanto, el debate- son un síntoma de su creatividad, inteligencia y sentido de la oportunidad.


Por nuestra parte, como ya se ha anunciado, no intentaremos sintetizar estos cuatro días intensos de análisis, sino reflexionar en voz alta a partir de algunos de los debates a los que asistimos. Concretamente, intentaremos exponer nuestro punto de vista sobre la Evaluación del sistema educativo y el papel y sentido de PISA en el contexto actual. Sin embargo, no vamos a limitar la reflexión a los aspectos puramente teóricos o académicos, sino que formularemos algunas propuestas relacionadas con la acción. En todo ello, aceptamos sin ambages nuestra posición humilde de voz periférica: son éstas, como anuncia el título, unas notas al margen.


PISA, amenaza en la fiesta

PISA -como se sabe, siglas de Programme for International Student Assesment-, que naciera de la OCDE como una herramienta de navegación para orientar los cambios en la Escuela y adaptarla en última instancia a los cambios en el sistema productivo, se ha convertido en esta década en un objeto que ha adquirido sentido en sí y por sí mismo. Un objeto, además, que ha llegado a una notoriedad informativa y política que desborda cualquier previsión que pudiera haberse formulado a partir de la observación de instrumentos precedentes (las evaluaciones internacionales de la IEA, que estaban propuestas y elaboradas por un organismo educativo, no económico).


Esta notoriedad, este baño de masas del artefacto PISA, se observa con una suerte de desdoble de personalidad por parte de la esfera académica y universitaria: por un lado se advierte cierta fascinación por el hecho de que una herramienta propia de su dominio despierte tanta expectación social. Por otra parte, de inmediato, aparece la queja -más que amarga y sonora- por el tratamiento que los medios de comunicación social hacen de los informes PISA. Como quiera que esta queja es prácticamente universal -aún permanece en la isla el eco de los reproches de David Scott, de David Berliner, o de Julio Carabaña, a los medios de comunicación y a los periodistas- no queda más remedio que dedicar un mínimo espacio a analizar el fenómeno. Es más que clarificadora la observación de Antonio Bolívar: si es cierto, como señala el profesor de la Universidad de Granada, que el debate social sobre PISA se establece a partir de los discursos elaborados por la prensa generalista y si, incluso, ni siquiera las revistas especializadas escapan a esa sumisión a los trazos gruesos, las inexactitudes y el relato simple y reduccionista de los medios de masas, si esto es cierto, decimos, cabe entonces preguntarse cómo es posible que el mundo académico y universitario no haya dedicado un esfuerzo suficiente a contrarrestar la comprensible impericia de los profesionales de la información a la hora de digerir una herramienta de la complejidad técnica de los informes PISA. No debe olvidarse algo que saben bien los periodistas: en Teoría de la Comunicación, la aceptabilidad de un discurso (no en cuanto a su sentido, sino en lo que se refiere a su viabilidad) la decide y otorga el receptor del mensaje, que es el elemento de la comunicación que confirma y garantiza que ésta, en efecto, se produce. Así pues, corresponde a la comunidad científica elaborar una exposición inteligible -tanto como rigurosa- para la mayoría, de lo que PISA significa. A los medios sólo les tocaría, de ese modo, comunicar el relato, no crearlo, como hasta ahora.


De cualquier forma, la de los medios no es la única derivación problemática del magnetismo que PISA ejerce sobre las sociedades que se implican en el Programa. En asuntos tan sensibles como los que aborda PISA, teniendo en cuenta los elementos que pone en marcha en el discurso publicado -una clasificación de países en orden a su éxito educativo, cuyo rigor científico nadie parece discutir- era de esperar que, casi inevitablemente, se convirtiese de inmediato en un arma arrojadiza para políticos de toda condición, pelaje y ubicación geográfica. Así ha sido. En cada país -quizá no en Finlandia, Corea o Canadá-, cada resultado ha sido usado de inmediato, sin tiempo para la reflexión, sin propósito real de análisis, para descalificar adversarios, justificar reformas o reclamar el regreso de viejas prácticas docentes -prueba de que la urgencia anula el análisis, si es que éste interesa lo más mínimo-. En el caso de Estados Unidos, como nos comunicó el profesor David Berliner, ni siquiera se necesitó la agitación política: descubrir que el país no encabezaba un ranking de naciones -no sólo eso: descubrir su puesto mediocre tras países que los ciudadanos ni conocían- provocó una suerte de shock en la ciudadanía sólo soportable cuando los medios de comunicación cesaron de enfocar la "catástrofe". El valor del número, la tendencia social al manejo de tablas de valor para casi todo y el desconocimiento de la realidad social de países diferentes al propio explican esta convulsión norteamericana, según Berliner. Pero debe añadirse -continúa el profesor- que la amplificación del sonido procedente de PISA estaba, también, desde el principio, cumpliendo otros objetivos: denunciar el "Estado" en EE.UU. como una maquinaria fallida; abolir el sistema de Escuela Pública para privatizar.


En Alemania, el debate sobre PISA se desarrolla en diversas variantes. La publicación del primer informe provoca, como en EE.UU., una dolorosa convulsión en la opinión pública, cuando se comprueba que -una vez más- el lugar en el ranking -y no los resultados absolutos obtenidos, que es una información que parece no importar en ningún sitio- decepciona las expectativas que la ciudadanía tiene sobre su país y ofrece una imagen -un retrato- nada halagüeño. Esa conmoción, sin embargo, lleva desde muy pronto a una reacción de las autoridades educativas, que impulsan diversos cambios para corregir tendencias negativas. En el marco de los cambios que se suscitan, se abre la discusión sobre la atención al alumnado inmigrante. El debate no ha concluido. La profesora Petra Stanat mantiene que el elemento clave del desfase escolar del alumnado inmigrante es, en Alemania, el uso de una lengua distinta del alemán en el núcleo familiar del alumno. Aun cuando resulte una tesis discutible -¿no pensábamos todos que el bilingüismo es una bendición? ¿Sólo si uno de los dos idiomas es el inglés?-, no lo es, en absoluto, que la competencia lingüística respecto al idioma en el que se verifica la transmisión cultural determina la calidad de los aprendizajes. Pues bien, según la profesora Stanat, las posibilidades de actuación al respecto -básicamente inmersión lingüística frente a consideración de segunda lengua para el idioma oficial del sistema escolar del que se trate- no se eligen por estar basadas en ensayos y error, sino por simples conjeturas que se fundamentan, en última instancia, en pura ideología -la profesora, no obstante, comunicó en el Simposio una experiencia sobre la que se podían, no sin cautelas, extraer conclusiones-.


De cualquier forma, además de despertar la conciencia de las autoridades educativas y señalar la necesidad de reforzar las posibilidades y la integración del alumnado inmigrante -logro que debemos relacionar, más o menos estrechamente, con PISA- los sucesivos informes del programa han abierto en Alemania, también, una reflexión sobre los objetivos y el sentido último de la educación. Se rescata para el debate el concepto tradicional de Bildung como signo y cifra del aprendizaje ideal, que va más allá del entrenamiento en determinadas destrezas de uso productivo -quizá puede achacarse, desde ese punto de vista, a PISA la pretensión de forjar, como señala Daniel Troehler, un homo oeconomicus- y se traza como meta la formación de una ciudadanía equilibrada, inteligente y capaz, sí, pero también solidaria, respetuosa con el medio natural; en suma, virtuosa. Petra Stanat, no obstante, entiende que el Bildung exige una infraestructura previa: las competencias básicas, la mirada de PISA.


La cámara modifica el retrato

No cabe ninguna ingenuidad sobre PISA. Puede entenderse como una oportunidad para consolidar ciertos cambios, para llevar a cabo una transformación global -mientras dure, y durará en función de su versatilidad-. Puede que se contemple PISA como arquetipo de toda evaluación -elementos hay que parecen funcionar irreprochablemente-, pero por muchas virtudes que le encontremos al programa, no podemos caer en el error de pensar que se trata de un simple instrumento y que, como tal, es "neutro", "científico" "irrebatible".


Es posible que esa pátina de imparcialidad irreprochable se derive de que aparentemente, al menos, se entienda que "número" y "objetividad" son conceptos indisolublemente unidos. Según Thomas S. Popkewitz, el número, noción asociada a la idea de democracia, llega a adquirir la solvencia de un "hecho". De un hecho incontrovertible, además. Desde esta perspectiva, PISA se convierte en una herramienta de navegación aparentemente desprovista de intenciones y por completo a salvo de cualquier riesgo de subjetividad o error. En teoría, PISA se destina a la evaluación del conocimiento práctico y, supuestamente, elabora pruebas "libres de contenidos". Todo esto, por supuesto, está lejos de ser así: según el mismo autor, Popkewitz, resulta imposible una prueba "sin contenidos" o liberada por completo del currículo.


Antes de continuar con el análisis de los efectos de PISA sobre la realidad que -en teoría- se limita a medir, parece particularmente conveniente recordar, en todo caso, el Principio de incertidumbre, relacionado con la Mecánica cuántica. Podemos entender este principio si pensamos en lo que sería la medida de la posición y velocidad de un electrón: para realizar la medida -para poder "ver" de algún modo el electrón- es necesario que un fotón de luz choque con el electrón, con lo cual, modifica éste su posición y velocidad; es decir, por el hecho mismo de realizar la medida, el experimentador modifica los datos de algún modo, introduciendo un error que es imposible de reducir a cero, por muy perfectos que sean nuestros instrumentos.


Así, David Scott advierte que no existe posibilidad de una descripción "neutra": según el profesor de la Universidad de Londres, PISA opera a través de la Evaluación, pero esta evaluación que se lleva a cabo impulsa un determinado tipo de aprendizaje y, por tanto, de identidad, de estandarización. Al tiempo, Scott disipa cualquier duda sobre la posibilidad de alcanzar el éxito tomando como base las premisas teóricas de PISA como medida: no puede darse un proceso directo de examen -porque sólo puede evaluarse la capacidad construida-, ni puede realizarse sin que se desencadene una transformación interna del examinando -que se transforma por y para la prueba-. Se producen efectos multiplicadores -puesto que el currículo se transforma por la obligatoriedad de las pruebas-. No puede medirse con exactitud la capacidad y el rendimiento, desligados de la "cultura" y, finalmente, no cabe pensar que la pretendida "transferencia" de los aprendizajes a la vida real no sea limitada y problemática: la prueba es un constructo, no la vida real.


La presión de PISA sobre docentes y centros, según David Berliner, pone en marcha los mecanismos anunciados por J. Campbell sobre la predicción de la corrupción. Cuando se le otorga el máximo valor a un instrumento de medición -es, obviamente, el caso de PISA- las magnitudes que se observan a través del mismo, se "corrompen": todo se torcerá para alcanzar buenos resultados. De hecho, el sistema educativo -como mínimo en la praxis- se deforma según los dictados de la prueba.


Berliner exponía, incluso, cambios estructurales en el currículo en diversos Estados de EE.UU. Dichos cambios, además, crean una diferenciación de currículos en función del rendimiento escolar, es decir, en última instancia, del nivel socioeconómico del alumnado: el desarrollo de No Child Left Behind Act -Ley sobre ningún niño rezagado, aprobada durante el primer mandato de Bush, hijo- ha limitado en la práctica el currículo a las tres destrezas que examinará PISA, privando, de ese modo, al alumnado pobre, del estudio y disfrute de las artes y la música -que sí se entregan a los alumnos ricos- poniendo en pie un nuevo y sofisticado apartheid. Se produce, pues, un "estrechamiento" del Currículo que se ciñe a un segmento de la población con el único propósito de que EE.UU. mejore posiciones en el ranking de PISA.


Además del cuestionamiento de la pretendida asepsia de PISA como herramienta de medición -muy cuestionable como vemos- conviene, quizá, reparar en su código genético. PISA deriva directamente de los trabajos de la IEA -Asociación Internacional para la Evaluación del Rendimiento Educativo-, como ya señalamos. Y estos trabajos guardan estrecha relación con la Guerra Fría, muy concretamente con el shock que produjeron en la Administración americana y en su ciudadanía las conquistas espaciales de la Unión Soviética. Ya entonces, se propugna incidir especialmente en la evaluación de las Matemáticas y las Ciencias desde edades tempranas -supuestamente son las áreas de conocimiento que proporcionan las habilidades buscadas por el poder-. Evidentemente, la evaluación del sistema educativo persigue, entre otros fines, el de lo que podríamos denominar "rendición de cuentas". Se trata de un objetivo de la evaluación perfectamente legítimo: las sociedades invierten presupuesto público en un sistema al que pueden pedir explicaciones sobre sus logros. En la actualidad, esta exigencia de eficiencia -de una saneada relación entre recursos y resultados- parece más necesaria que nunca, en un mundo en el que la rebaja de impuestos se vende como el oxígeno necesario para que la economía y los ciudadanos respiren satisfactoriamente, en un mundo en el que los medios de producción se deslocalizan y sólo la economía del conocimiento parece poder aliviar el agotamiento de las economías postindustriales de Occidente.


Los países de la OCDE, pues, tal como señala el Profesor Ulf Lundgren, se han dotado de PISA en paralelo al proceso según el cual el poder del capital se desplaza a la propiedad del conocimiento. Pero no sólo eso. Otros países participan "voluntariamente" en PISA.


¿Sólo por obtener datos de una evaluación externa y comparativa? Quizá no. Clara Morgan avisa de que el flujo de crédito y financiación a países en desarrollo se tasa con los datos de PISA en la mano. Así pues: ¿existe una participación "voluntaria" en PISA? ¿Es únicamente PISA una herramienta disponible, según mantiene el profesor Zorrilla, para el contraste y el avance educativo que ha servido, en México, para conocer mejor la realidad educativa o, por el contrario, no existe la posibilidad de sustraerse a su mirada por imperativo de las políticas económicas de los países emergentes? ¿Cuánto hay en PISA de herramienta puramente económica?


Como ya dijimos, no caben ingenuidades sobre PISA. Después de un somero análisis resulta imposible dejar de reparar en los elementos señalados, que, definitivamente, alejan cualquier posibilidad de entender el Programa PISA como una herramienta de medición "objetiva", carente de fines ni intenciones, puro espejo donde buscar la imagen exacta de los sistemas educativos de los países participantes en cada escrutinio. No caben ingenuidades. Sin embargo, una vez comprendidas y aceptadas las "impurezas" de PISA, sí podemos interrogarnos sobre su utilidad. Sí podemos, también, preguntarnos sobre su posición "evolutiva", sobre su vigencia y sobre su fecha de caducidad: ¿Resulta la evaluación de competencias un paso atrás para los sistemas educativos o, por el contrario, marca una evolución lógica y razonable en un mundo en el que se dispone de memoria artificial y tecnologías de la información que obligan a una nueva idea de la escuela y del docente para un ciudadano que será -gracias o a pesar del docente y de la escuela- radicalmente distinto en su modo de aprender? ¿Tenemos alternativas mejores, para empezar? ¿Existe la posibilidad de una vuelta atrás que ignore la realidad social y tecnológica en la que se efectúan los procesos educativos? ¿Es posible plantearse una educación en las virtudes cifradas en el Bildung sin garantizar primero la infraestructura de las competencias básicas? En suma, ¿es el camino que traza PISA una dirección adecuada para la forja de ciudadanos del s. XXI o deberíamos reclamar de inmediato un radical cambio de rumbo? En caso de que así fuera, ¿hacia dónde debería apuntar esa nueva dirección? Visto así, PISA, a pesar de resultar un objeto de medición problemático y controvertido, a pesar de devolver una imagen interesada -como espejo utilitario que es, al servicio de sus dueños- puede también operar como un nutriente en los sistemas educativos, puede aportar la proteína necesaria para poner en marcha una nueva Escuela.


Tres plegarias finales

No haremos propuestas. Nos limitaremos a entonar tres sencillas plegarias al vacío. Como cartas a los Reyes Magos encerradas en botellas y arrojadas a la marea.


Primera Plegaria: Obsérvense los datos que arroje el informe PISA -sea cuando fuere- como se observaría cualquier otro informe de Evaluación. Si entendemos que la evaluación es una parte más del proceso de enseñanza y aprendizaje, si entendemos que tiene como principal objetivo -¿hay algún otro?- la mejora de ese proceso, no tiene sentido sacralizar un instrumento concreto y considerarlo como el instrumento por antonomasia. Debe ponerse atención en los aspectos en los que técnicamente el informe PISA resulta relevante para la mejora posterior del proceso educativo. Sabemos que otro tipo de evaluación puede ser más útil para otros aspectos.


Segunda Plegaria. Rehúyase cualquier tentación reduccionista de ensimismamiento en la posición en el ranking, así como el chismorreo estéril sobre el lugar de los demás en el mismo. Como hemos ido señalando, una de las paradojas de PISA es que a nadie parecen interesar los datos absolutos que proporciona sobre el estado de los sistemas educativos.


Si un país, o una parte de éste, mejorase sensiblemente sus resultados al tiempo que bajara su lugar en el ranking, inmediatamente la opinión pública, los medios y la clase política interpretaría el informe como la noticia de un empeoramiento de la situación educativa, aun cuando los indicadores "gritasen" lo contrario. El ranking debe ser entendido como la consecuencia de que la evaluación se simultanea en muchos países y, en el mejor de los casos, como una ocasión de identificar las mejores prácticas para -cuando procediera- intentar adaptarlas a la realidad en la que operamos.


Tercera Plegaria. Téngase presente el objeto de la evaluación y actúese en consecuencia. La evaluación tiene como objetivo la mejora del sistema. PISA se convierte en alimento en la medida en la que lo utilizamos para mejorar el proceso educativo: es nuestro deber olvidar la sugestión autista de PISA-espejo para proponer medidas, para planificar actuaciones, para corregir errores, para localizar conflictos, debilidades y problemas... Todo ello sin concesiones a la inmediatez, sin condicionarse a las urgencias de los medios de comunicación, imponiendo un ritmo desde y para el sistema educativo. Mejor desde la calma y la ausencia de ruido mediático.


Así sea.


 


Escrito por Ramiro Mayo   

Ramiro Mayo


 


Fuente

http://www.adide.org/


 

miércoles, 5 de mayo de 2010

Pisa 2006 Comentarios Técnicos

1. PISA 2006 CUESTIONES TÉCNICAS
2. CÓMO SE APLICA UNA PRUEBA PISA EN UN CENTRO EDUCATIVO
o La selección de los centros de la muestra la realiza una empresa estadística dependiente del consorcio que gestiona PISA 2006 con las bases de datos de centros enviadas desde cada país.
o Cuando una escuela ha sido seleccionada por ellos para participar en la prueba PISA, se contacta con el director/a y esta nombra una persona de coordinación. Esta persona hace un listado del alumnado de 15 años del centro y lo envía al ISEI-IVEI.
o Por medio de una aplicación informática facilitada por el consorcio PISA, se eligen 35 al azar (de los diferentes cursos y clases). Después se recopilan datos lingüísticos de este alumnado.
o La aplicación se realiza por un aplicador o aplicadora contratada al efecto y formada para esta labor. Las personas que aplican las pruebas establecen un calendario con los centros. Un profesor cuida la aplicación.
o La aplicadora se ocupa de que los cuadernillos se repartan correctamente (hay hasta 13 cuadernillos diferentes y se reparten secuencialmente) y presenta la prueba al alumnado.



3.
o La introducción de la prueba es estándar y se leen exactamente las mismas instrucciones en todos los países.
o Si no hay preguntas, se procede a la aplicación dividida en 2 partes: dos horas de test (divididas por un pequeño descanso) y sesión de respuesta a los cuestionarios.
o Una vez recogidos los cuadernillos, son enviados al ISEI-IVEI para su codificación.
o Si existiera un 15% de ausencias en la muestra del centro habría que volver a aplicar a los ausentes.
o La codificación-corrección de las pruebas se realiza con profesores contratados para esta labor. El consorcio PISA realiza un control de corrección y discrepancias en la misma ya que 100 cuadernillos de cada tipo son corregidos 4 veces por personas distintas y los datos son enviados al consorcio PISA.
CÓMO SE APLICA UNA PRUEBA PISA EN UN CENTRO EDUCATIVO
4. LA CUESTIÓN DE LA LENGUA DE LA PRUEBA
o El ISEI-IVEI realizó una investigación sobre el efecto de la lengua de la prueba en el alumnado bilingüe ( http://www.isei-ivei.net/cast/pub/influencialenguacast.pdf ) y dos evaluaciones de los niveles B1 y B2 del euskera.
o A la luz de los datos existentes podemos decir que:
§ Gran parte del alumnado de Secundaria en Euskadi no tiene un alto nivel de euskera parecido al de un hablante normal de esta lengua. Son por tanto aprendices del euskera que en muchas ocasiones no llegan a un nivel B2 de dominio de la lengua.
§ Las pruebas PISA y otras internacionales tienen una gran carga lingüística (ver anexo).
§ Cuando el alumnado bilingüe realiza las pruebas internacionales en la lengua que más domina (la familiar) obtiene un resultado equiparable al del resto del alumnado, lo que significa que sí adquieren las competencias matemáticas o científicas cuando estudian en la segunda lengua.
5. INVESTIGACIÓN SOBRE LA LENGUA DE LA PRUEBA
6. LA LENGUA DE LA PRUEBA
o Los estándares PISA permiten que las pruebas sean aplicadas en la lengua familiar del alumnado, si esa es una de las lenguas de instrucción en el país y así lo deciden los responsables.
o De hecho en Hong-Kong, Canadá o Irlanda se toma la misma decisión en el caso de las E.M.I., Inmersión o All-Irish School.
o La competencias que mide PISA no se adquieren solamente en la escuela, por lo que tiene más sentido la utilización de la lengua que más dominan.
7.
o En primer lugar, el rendimiento de los alumnos en áreas con una alta carga lingüística como Lectura y Ciencias es a menudo infravalorado cuando se les evalúa en inglés (L2).
o • Esto es debido a que son menos competentes en L2 que en L1.
Esther Sui-chuHo Evelyn Yee-funMan Facultad de Educación Instituto de Investigación Educativa de Hong Kong Universidad China de Hong Kong
8. CRESST National Center for Research on Evaluation, Standards, and Student Testing UCLA Center for the Study of Evaluation
9. What CRESST Research Tells Us ( lo que nos dice la investigación CRESST )
o Language proficiency strongly relates to test performance. Students designated English Language Learners (ELL) by their schools score significantly lower than non-ELL students on many science and math questions. However, the performance gap decreases, or even disappears, on math items that have relatively low language demands, such as math computation.
o La competencia lingüística está fuertemente relacionada con el rendimiento en las pruebas. Los estudiantes designados como Aprendices del Inglés (ELL) en sus escuelas puntúan significativamente más bajo que los estudiantes no-ELL en muchas preguntas de ciencias y matemáticas. Sin embargo la diferencia de rendimiento decrece, o incluso desaparece, en los ítems de matemáticas con una exigencia lingüística relativamente baja, como en cálculo matemático.
http://www.cse.ucla.edu/products/policy/cresst_policy4.pdf
10. UN EJEMPLO: ¿EN QUÉ LENGUA APLICARÍAN LA PRUEBA PISA EN MADRID O EN LOS CENTROS VASCOS QUE DAN ASIGNATURAS EN INGLÉS? Si en 177 escuelas se aprende en inglés en el menos un tercio del horario y como máximo en todas las asignaturas menos Matemáticas y Lengua, ¿deberían aplicar las pruebas PISA en inglés? En nuestros centros públicos y concertados de secundaria trilingües, que pasan de 40 ¿deberían aplicar las pruebas PISA en inglés?
11. PISA 2006 CIENCIAS APLICANDO EN LA LENGUA FAMILIAR
o No existe diferencia estadística entre los tres estratos concertados.
o Eliminando el efecto del Nivel Socioeconómico y Cultural, estrato B público obtiene la puntuación mas alta, aunque no existe diferencia estadísticamente significativa.
12. LA MUESTRA: ESTRATIFICADA POR RED Y MODELO DENOMINAMOS ESTRATO A LA COMBINACIÓN DE RED Y MODELO 151 centros 3929 alumnos
13. LA MUESTRA
o Los únicos criterios de exclusión de un alumno o alumna, establecidos por PISA, fueron los siguientes:
§ tener necesidades educativas especiales por presentar una discapacidad funcional o intelectual, o tener una destreza insuficiente en la lengua de evaluación para lo que era necesario así mismo reunir tres requisitos:
§ que su lengua familiar no fuera una de las lenguas de la evaluación,
§ poseer una destreza limitada en la lengua de aplicación y
§ haber recibido menos de un año completo de instrucción en la lengua de la evaluación.
o Como puede observarse no había posibilidades de excluir al alumnado inmigrante por el hecho de serlo, y en la muestra PISA 2006 el 3,5% de la misma era alumnado inmigrante escolarizado en los centros del País Vasco que hicieron la prueba, lo que es un porcentaje que se ajustaba perfectamente al escolarizado de 15 años.
14. LAS PREGUNTAS-EJEMPLO
o La propia OCDE publica en cada evaluación, ver el propio informe internacional, preguntas-ejemplo para ilustrar lo que PISA mide y cómo lo hace: http://pisa-sq.acer.edu.au/
o Casi todos los países han publicado estos ítems-ejemplo en sus respectivas lenguas para que el profesorado pueda conocerlos.
o Los ítems reales de las pruebas PISA son secretos y nadie los tiene para “ hacer prácticas ” en su centro.
15. ANEXO PREGUNTAS-EJEMPLO DE CIENCIAS
16. CIENCIAS GRAN CARGA LINGÜISTICA
17. MÁS CARGA LINGÜÍSTICA: RESPUESTA CONSTRUIDA

lunes, 26 de abril de 2010

Características de la Evaluación PISA


Qué evalúa PISA
A diferencia de otros exámenes que se han utilizado en el pasado, PISA está diseñado para conocer las competencias, o, dicho en otros términos, las habilidades, la pericia y las aptitudes de los estudiantes para analizar y resolver problemas, para manejar información y para enfrentar situaciones que se les presentarán en la vida adulta y que requerirán de tales habilidades.

PISA se concentra en la evaluación de tres áreas: competencia lectora, competencia matemática y competencia científica.



26812868 Caracteristicas Del Programa PISA



¿Qué hacer con los resultados de PIsA?
Los resultados de PISA han sido inquietantes para muchos países. Algunos han celebrado y otros han lamentado esos resultados, pero pocos han permanecido indiferentes. El gran desafío está, sin duda alguna, en salir de las reacciones momentáneas y pasar a la más laboriosa pero prometedora tarea de analizar a fondo los resultados de las evaluaciones, y empezar a diseñar y poner en práctica políticas públicas adecuadas a la atención de los problemas descubiertos.
Varios de esos problemas tienen que ver, seguramente, con las escuelas, pero
muchos otros se relacionan también con las condiciones de vida de las familias,
el acceso a medios de comunicación de calidad, el adecuado funcionamiento y la difusión de las bibliotecas públicas, y otras muchas cosas.
Entre los hallazgos y las reacciones desencadenados por PISA se encuentra la toma de conciencia, en muchos países desarrollados –con Alemania a la cabeza–, de la fuerte disparidad interna en los resultados de la evaluación. En particular, ha sido dramático descubrir que segmentos importantes de la población estudiantil de algunos países europeos se encontraban en el nivel más bajo de evaluación de PISA, y que este fenómeno está estrechamente ligado con la migración. Los hijos de inmigrantes, en Alemania y otros países, muestran resultados muy inferiores al resto de la población.
Realidades sociales como la descrita han obligado a los países a poner más atención en la educación y en el entorno de los jóvenes. Una respuesta muy extendida ha sido la revisión de los estándares educativos y la creación de programas para verificar su cumplimiento. Muchos países han desarrollado evaluaciones periódicas propias para hacer un monitoreo local más frecuente del cumplimiento de las metas educativas. Está claro que la evaluación intensiva no resuelve en sí misma los problemas, pero tampoco carece de utilidad porque sensibiliza a la sociedad y a las escuelas, y permite perfeccionar los exámenes y los criterios con que se aplican e interpretan.
Los propios expertos de PISA trabajan en una mejora permanente de los recursos de evaluación, y prueba de ello son los cambios y novedades que, cada tres años, presenta el examen. Fundamentalmente, lo que busca mejorar PISA ahora son los mecanismos que permitan detectar y describir los aspectos de la enseñanza que influyen en los resultados obtenidos por los alumnos. De lo que se trata, claramente, es de buscar herramientas científicas para poder decir, con la mayor precisión posible, qué es lo que está fallando cuando los resultados son bajos y qué se está haciendo bien cuando los resultados de los exámenes mejoran.
La realización de PISA y su distribución entre los miembros de la OCDE y algunos países adherentes a la iniciativa ya ha tenido resultados importantes: los gobiernos y la opinión pública han volcado su atención en el tema de la educación y nadie soslaya su prioridad; se reconoce claramente el vínculo entre la calidad de la educación y el progreso de los países, y se ha visto, objetivamente, la grave desigualdad en opciones de educación en la comunidad internacional y dentro de cada país.
Sería de esperarse que en los próximos años, la riqueza de la información aportada por PISA sirva a un mayor número de países para emprender acciones orientadas a mejorar la calidad de sus sistemas educativos.

sábado, 17 de abril de 2010

Financiarán pobres la prueba PISA, que es hecha para ricos

Publico un artículo, en el que un prestigiosa profesor mexixano, cuestiona la necesidad de llevar a cabo las pruebas PISA en su pais, en lo personal no comparto del todo sus opiniones, `pero resulta interesante conocerlas.


Inútil, aplicar exámenes que sólo benefician a las editoriales privadas: Ángel Díaz Barriga

Felipe Martínez Rizo, director del Instituto Nacional para la Evaluación de la Educación, durante la presentación de los resultados de la prueba PISA, en diciembre dice 2007



Sólo por el derecho de participar en el Programa para la Evaluación Internacional de Alumnos (PISA, por sus siglas en inglés), el gobierno de México debe pagar 100 mil dólares a la Organización para la Cooperación y el Desarrollo Económicos (OCDE).


Con lo anterior, resulta que si alrededor de 60 naciones participan en dicha evaluación, el tercer mundo estará financiando un examen que en realidad se hace para alumnos de primer mundo, advirtió Ángel Díaz Barriga, especialista del Instituto de Investigaciones sobre la Universidad y la Educación de la Universidad Autónoma de México (UNAM), quien enfatizó que para lo único que han servido esas pruebas es para que las editoriales privadas generen un mercado millonario en torno a dicho examen.


Sin embargo –dijo–, esa cantidad, que apenas es un mínimo de lo que el gobierno federal gasta en su estrategia de realizar una serie de exámenes –la sola aplicación de Enlace cuesta cerca de 200 millones de pesos–, además de inútil, es un absurdo.


Es tan ilógico como si a alguien que va a realizarse un análisis de química sanguínea le dicen que tiene el azúcar elevada, y se va al laboratorio de enfrente y vuelve a pagar por un nuevo estudio para oír lo que ya le dijeron, sostuvo.


En entrevista, indicó que en México ya se sabe que los estudiantes presentan un déficit en matemáticas y español. Lo paradójico es que en lugar de que el Estado realice acciones para remediar la problemática, sigue gastando para saber lo que ya conoce.


Llama la atención –continuó– que al exigir la racionalización del gasto público, la Cámara de Diputados no plantee la racionalización en la evaluación, sobre todo cuando, por ejemplo, la investigación educativa ha mostrado que los reactivos de PISA tienen tendencias culturales, por lo que aplicar preguntas elaboradas por ciertos países favorece precisamente a dichos países.


Recordó que la prueba PISA 2006 fue diseñada en Estados Unidos, Noruega, Japón y Australia. De acuerdo con la OCDE, el primer ciclo de evaluaciones se aplicó en 2000 y 2002, en un total de 43 países, y el ciclo más reciente –el de 2006– incluyó 57.


Por ello, advirtió el experto de la UNAM, me parece totalmente crítico que el tercer mundo subsidie el funcionamiento del consorcio de PISA en Ginebra, o de una oficina de la OCDE creada para el primer mundo.


Lo anterior –dijo–, a pesar de que se ha demostrado que la fiebre gubernamental por éste y otros exámenes es una apuesta inútil, ya que, para empezar, existen otras referencias de lo que sucede con el aprendizaje en la escuela.


No obstante, en la actualidad, un niño de sexto de primaria en México tiene que presentar por lo menos cinco pruebas nacionales, entre ellas la de Enlace y la de IDANIS, sin contar si ese año le toca el examen SERCE –sobre matemáticas– que aplica en América Latina la Organización de Naciones Unidas para la Educación, la Ciencia y la Cultura, entre otras.


En torno a estas evaluaciones se ha creado una burocracia en cuanto al pago de oficinas, luz, salarios, contrataciones de aplicadores, además de que en cada entidad se generó una dirección o coordinación que se encarga de supervisar las pruebas estatales, añadió.


Todo ello ha servido para que las editoriales privadas creen un mercado y el Estado también tenga uno nuevo. En torno a ello existe ya una colección de libros en México para entrenar a los niños a resolver pruebas, mientras en todos los países de América Latina se ha elaborado un texto específico con el mismo objetivo, finalizó.




Karina Avilés


Periódico La Jornada
Miércoles 30 de diciembre de 2009, p. 25


Fuente


http://www.jornada.unam.mx


 


 

jueves, 8 de abril de 2010

La evaluación PISA de la alfabetización científica y la didáctica de las ciencias

De todos los estudios comparativos internacionales puestos en marcha en los últimos años para evaluar los resultados del aprendizaje escolar en lectura, matemáticas y ciencias, el más citado tal vez sea, hoy, el proyecto PISA (acrónimo de su nombre en inglés: Programme for International Student Assessment) de la OCDE (Organización para la Cooperación y Desarrollo Económico).

PISA evaluó la alfabetización científica como área prioritaria por primera vez en el año 2006 (los resultados se dieron a conocer al público en diciembre de 2007). Ello obligó, previamente, a realizar una interpretación mucho más amplia de las competencias a evaluar en ciencias, así como a hacer una descripción más detallada de la alfabetización científica.


La definición de alfabetización científica de PISA 2006 parte de aquello que los estudiantes de 15 años deben conocer, valorar y ser capaces de hacer para enfrentarse a situaciones de la vida real en el mundo actual y futuro. Un aspecto clave de esta alfabetización científica son determinadas capacidades propias de la ciencia y de la investigación científica. Las competencias de los estudiantes para poner en práctica tales capacidades dependen, por un lado, de sus conocimientos científicos sobre el mundo natural y acerca de la propia ciencia, y, por otra, de las actitudes que muestran hacia los temas científicos.


En definitiva, PISA 2006 evaluó aspectos cognitivos y afectivos de la alfabetización científica de los estudiantes de 15 años. Los aspectos cognitivos se refieren a los conocimientos a los que han de recurrir los estudiantes y a su capacidad para usarlos del modo más adecuado posible en determinados procesos cognitivos propios de la ciencia y de las investigaciones científicas. Además, se prestó una particular atención a aquellos temas en los que el conocimiento científico puede contribuir más a la implicación del alumnado en los procesos de toma de decisiones en situaciones con relevancia personal, social o mundial.


Por último, es necesario resaltar que el marco teórico correspondiente al área científica de la evaluación PISA 2006 está en sintonía con muchas de las principales y más recientes aportaciones de la investigación internacional en didáctica de las ciencias, tales como:


(i) Orientación hacia una alfabetización científica más centrada en competencias frente a una enseñanza basada en hechos y conceptos científicos sobre todo.
(ii) Inclusión explícita de contenidos sobre el conocimiento acerca de la naturaleza de la ciencia y las relaciones mutuas entre ciencia y tecnología.
(iii) Preferencia por los contextos relevantes de la vida real frente a los de carácter más académico.
(iv) Selección de conceptos científicos en función de su utilidad para afrontar situaciones de la vida actual y futura.
(v) Potenciación de una educación para la participación en la sociedad, basada en la adopción y comunicación de decisiones razonadas y suficientemente documentadas respecto a asuntos científicos y tecnológicos con interés personal, cultural, profesional y social.
(vi) Importancia concedida a la educación de actitudes relacionadas con la ciencia y la tecnología.


 


Autor

José Antonio Acevedo Díaz

http://www.oei.es

domingo, 28 de marzo de 2010

Finlandia: el respeto a la Educación

El valor que concede la sociedad finlandesa a su enseñanza es tan elevado que la profesión de maestro es una de las más demandadas. La flexibilidad, gratuidad del sistema e igualdad de oportunidades también contribuyen al éxito en PISA.

La profesora Onerva Mäki es uno de los millones de granitos de arena que constituyen el exitoso "granero" educativo de Finlandia. Su compromiso con la enseñanza y una carrera dedicada a la Educación de los niños discapacitados le ha llevado a ser galardonada por la Unesco con uno de los premios Comenius, –la distinción más prestigiosa a la carrera docente–. Para ella el "respeto a la Educación que coexiste en la sociedad finesa" es la clave del sobresaliente de Finlandia en PISA. De él brotan el resto de características, –como la calidad del profesorado, la gratuidad de la Educación o la flexibilidad del currículo– que hacen posible el sueño educativo finlandés.

La explicación reside en que respeto y Educación son dos palabras que desde hace siglos caminan de la mano en este diminuto país nórdico, con cerca de un millón menos de habitantes que la Comunidad de Madrid –5.300.000–. Hasta tal punto de que "en el siglo XIX un ciudadano no podía casarse en Finlandia si no sabía leer", explica la galardonada Onerva Mäki. Esa obligación estaba influenciada por unos fuertes principios luteranos que establecían que todos los cristianos debían ser capaces de leer la palabra de Dios y que fue el punto de partida de un sistema educativo que no ha hecho otra cosa que cosechar éxitos.

Pero no sólo el respeto a la docencia honra al sistema educativo de Finlandia. El resto de elementos los acaba de desvelar el Ministerio de Educación finés en un documento que bajo el título PISA: algunos de los factores que explican el éxito finlandés en Educación descubre la fórmula mágica que durante los últimos años persiguen el resto de países. Y parece ser que no es uno sino varios los secretos que hacen posible su exitoso sistema educativo. Éstos abarcan desde los valores de la sociedad, su excelente red de bibliotecas, el compromiso de los profesores, la flexibilidad del currículo, a la gratuidad de un sistema educativo –en el que no hay que pagar ni por el dentista–. "Intentar imitar alguna de estas características por separado no tendría mucho sentido", explica la secretaria de Estado del Ministerio de Educación de Finlandia, Heljä Misukk, que defiende que su éxito "sólo puede ser explicado por la sinergia de diferentes factores".

El primero de ellos, según el documento del Ministerio finés es el que ya argumentaba la profesora Onerva Mäki: el valor que la sociedad finlandesa le concede a la Educación, donde "cerca de tres cuartos de los adultos entre 25 y 64 años han completado el Bachillerato y un tercio tiene una licenciatura". Y del que sólo se excluye un 1% de este grupo de edad sin la enseñanza obligatoria.

A una Educación muy valorada le sigue una profesión de Magisterio altamente cualificada, el segundo de sus secretos. "En Finlandia a todos los profesores se les exige licenciatura y su formación incluye varios periodos de enseñanza práctica", defiende el Ministerio. Lo que convierte la profesión de maestro en una ocupación "altamente reconocida y de elección popular" que permite a las universidades "la posibilidad de elegir sólo a los estudiantes más cualificados".

Con buenos maestros e interés por la enseñanza, disponer hasta del cuaderno o el dentista gratis no deja a los finlandeses excusa para no ir al colegio. En Finlandia que los niños estudien no le cuesta ni un euro a sus padres y ese es el tercero de sus secretos. La enseñanza obligatoria es gratuita durante sus nueve años de duración, pero además incluye los materiales escolares, la comida, el transporte y hasta la asistencia sanitaria.

A eso hay que añadirle un sistema educativo muy flexible que permite "organizar la enseñanza de la forma más adecuada en cada zona", concede a los docentes "amplias responsabilidades pedagógicas" derivadas de su gran papel participativo y les autoriza a elegir junto al colegio el material y métodos de enseñanza preferible para sus alumnos.

Pero no sólo los docentes colaboran en el sistema educativo, otra de las peculiaridades de su enseñanza es la amplia interacción entre profesores y estudiantes y la igualdad de oportunidades que se ofrece a todos los niños. "Nosotros no hacemos diferencias por zona de residencia, género, situación económica, lenguaje u origen cultural", explica el informe. Y no existen escuelas diferenciadas para niños y niñas.

Fuera de las escuelas, la guinda del pastel la pone una exitosa red de bibliotecas que permite obtener los libros de manera completamente gratuita. Todo un conjunto de factores que contribuyen al respeto de la sociedad por su Educación o viceversa.


 


Autora

Lola García-Ajofrín

http://www.magisnet.com/

viernes, 19 de marzo de 2010

La competencia lectora según PISA

¿Qué evalúa PISA? Donostiako Berritzegunea Mayo 2008 Felipe Zayas
La competencia lectora según PISA Capacidad de comprender, utilizar y analizar textos escritos para alcanzar los objetivos del lector, desarrollar sus conocimientos y posibilidades y participar en la sociedad
En esta concepción intervienen:
Unos propósitos de lectura
Diferentes clases de textos en relación con estos propósitos
Aspectos de la competencia lectora, según lo que los lectores hacen con los textos
Situación de lectura
Ámbito personal:
- para satisfacer intereses de orden práctico e intelectual;
- para entablar o conservar relaciones con otras personas;
- como actividad recreativa o de ocio;
- etc.
Ámbito público:
-para tomar parte en actividades sociales o comunitarias;
-para la relación del ciudadano con la administración.
Ámbito educativo:
-para aprender y comunicar el conocimiento
Ámbito profesional:
-lectura de los textos característicos del medio laboral.




Clases de textos
Textos continuos:
Narración, descripción, exposición, argumentación, instrucción, documento o registro e hipertexto
Textos discontinuos
Cuadros y gráficos, tablas, diagramas, mapas, formularios, hojas informativas, convocatorias y anuncios, certificados…
Aspectos de la competencia lectora
Obtener información
Desarrollar una comprensión general
Elaborar una interpretación
Reflexionar sobre el contenido de un texto y valorarlo
Reflexionar sobre la forma de un texto y valorarla
Obtener información
Extraer datos o ideas relevantes que se indican explícitamente en el texto:
se pueden identificar sin necesidad de hacer inferencias o interpretaciones.
Diferentes niveles de dificultad , dependiendo de que:
la redacción literal de la pregunta se corresponda o no con la redacción del texto,
la información esté o no esté localizada en un lugar de prominencia,
haya en la pregunta uno o más elementos que se deban tener en cuenta
la información que se pide esté en varios lugares del texto
Desarrollar una comprensión general
Leer para:
averiguar de qué trata un texto: para identificar su tema (y a veces lo más relevante sobre el tema).
captar su función o utilidad: distraer, ampliar los conoci- mientos sobre un tema, convencer de algo, expresar una valoración, etc.
(El lector trata de comprobar, en una primera lectura, si el texto se adecua o no a sus objetivos.)
Diferentes niveles de dificultad según si:
hay algún enunciado que declare el tema del texto
hay que obtenerlo a partir de los datos del texto
Elaborar una interpretación
Comprensión de las relaciones entre las partes del texto (implica la identificación de los esquemas textuales subyacentes).
Capacidad para extraer el significado mediante inferencias.
Esquemas textuales subyacentes
Serie de propiedades que se atribuyen a una entidad (esquema descriptivo).
Factores que explican un fenómeno, acción, suceso, situación, etc. (esquema causal).
Medios para alcanzar un fin (esquema problema- solución).
Similitud o contraste entre dos problemas (esquema comparativo).
Fases mediante las que se ha configurado una entidad (esquema temporal o secuencial).
Tesis y argumentos (esquema argumentativo).
Etc.
Reflexionar sobre el contenido de un texto y valorarlo
Saber relacionar la información que contiene el texto con conocimientos procedentes de otras fuentes:
los conocimiento y opiniones del lector;
otros textos.
Reflexionar sobre la forma de un texto y valorarla
Examinar algunos procedimientos formales para:
Valorar la adecuación o inadecuación del registro utilizado;
Valorar la eficacia de la forma de un texto de acuerdo con su propósito o la actitud del autor.
Related Posts Plugin for WordPress, Blogger...

Busca en mis sitios