lunes, 20 de agosto de 2018
ENTRE LOS DEMONIOS, EL DIABLO ES EL REY. ¿QUÉ ES LO QUE NO SE VE DE LOS RESULTADOS DE LAS PRUEBAS PISA DE LA OCDE?
miércoles, 31 de enero de 2018
El mito de las pruebas PISA
lunes, 8 de julio de 2013
Una mirada a las pruebas de logros en Educación
martes, 7 de junio de 2011
Análisis de la prueba SERCE
En la actualidad hablar de acceso a la educación, como el solo hecho de que los niños y jóvenes asistan a escuela ya no es suficiente, pues la mayoría de los países de la región sobrepasan el 94% de tasa neta en educación primaria, un solo país presenta una tasa de 78%, en tanto que tres alcanzan el 87% y 94% respectivamente.
Esta realidad obliga a los países a plantearse nuevas metas, metas de orden cualitativo, un siguiente nivel de acceso, que debería ser el acceso al conocimiento, entendido como el dominio de niveles básicos de logros cognitivos.
Para reflexionar sobre la eficiencia de los sistemas educativos de la región se han escogido 16 países de los cuales se tiene datos de tasa neta de matrícula hasta el año 2005, excepto cuatro de ellos cuyos datos corresponden al año 2004, uno solo con datos al 2006, y Costa Rica que no presenta datos.
Se analizarán también los índices de variación, entendidos como la diferencia entre el número de estudiantes matriculados en el sexto y tercer grado respectivamente, así como las tasas de sobreedad de los mismos grados, definidas como el porcentaje de niños con dos o más años de edad teórica.
Ver el artículo en el PDF publicado a continuación
jueves, 21 de enero de 2010
Prueba Pisa 2009: Hilando Fino
La lectura en el Informe PISA-OCDE: hacia el 2009 Paloma Valdivia Vizarreta
El proyecto PISA de la OCDE es una evaluación internacional estandarizada que se aplica al alumnado de 15 años. En este proyecto, en el que participaron 32 países
en la prueba del año 2000, 43 en el 2003 y 60 en 2006, se evalúa el rendimiento en tres ámbitos: Lectura, Matemáticas y Ciencias.En 2009, comienza el nuevo ciclo centrado en la competencia lectora. De ahí el interés de realizar una segunda parte de “Hilando Fino”
Esta presentación resume de forma conjunta, el marco teórico de la lectura y los items liberados en las tres ediciones del primer ciclo PISA (2000, 2003 y 2006).
Comprende una serie de conocimientos, habilidades y estrategias que la persona adquiere con los años, no solo en la etapa infantil.
Se incrementa mediante las situaciones que vive, la interacción social.
Comprender informaciones escritas, utilizarlas y reflexionar.
Satisfacer una serie de aspiraciones personales.
Le proporciona instrumentos lingüísticos para enfrentar las exigencias sociales modernas.
La lectura de Pisa
“La competencia lectora es la capacidad de comprender, utilizar y analizar textos escritos para alcanzar los objetivos del lector, desarrollar sus conocimientos y posibilidades y participar en la sociedad.”
A través del lenguaje podemos describir, narrar, contar y explicar la realidad.
Según lo que deseemos hacer, utilizamos un tipo u otro de texto e incluso combinaciones de unos y otros en el mismo discurso para dar a conocer lo que deseamos y hacernos comprender en diferentes situaciones y con interlocutores variados. Las tres dimensiones:
. Marco Teórico de PISA-OECD 2003
PRUEBA Núcleo de la evaluación Narración Exposición Descripción Argumentación Instrucción Documento Hipertexto Cuadros/gráficos Tablas Diagramas Mapas Formularios Convocatorias Anuncios Vales y bonos Certificados Hojas informativas
Acción: explorar, localizar e identificar datos relevantes.
¿Qué se evalúa?:que establezca concesiones entre la información que proporciona la pregunta y a información del texto, empleando las mismas palabras o sinónimos.
Nombre de personajes.
Ubicación en el tiempo.
Reconocer la presencia de informaciones distractoras.
Tener en cuenta un solo criterio para localizar uno o más fragmentos independientes de información expresada de una forma explícita.
Acción : juzgar el texto globalmente.
¿Qué se evalúa?: que el estudiante señale el tema general o el mensaje del texto, que identifique la función o utilidad.
Selecciona o crea un título.
Explica el orden de las acciones
Explica las dimensiones de un gráfico o tabla.
Acción: ampliar su primera impresión del texto.
¿Qué se evalúa?: que el estudiante procese la estructura informativa del texto demostrando comprensión en la cohesión textual.
Comparación y contraste de información
Capacidad de hacer inferencias del texto-
Capacidad de hacer inferencias sobre la intención del autor y en qué se basa para afirmarlos.
Identificación y listado de pruebas o pistas.
Acción: relacionen la información del texto con conocimientos de otras fuentes.
¿Qué se evalúa?: que el estudiante contraste
Evaluar críticamente o formular hipótesis a partir de conocimiento especializado.
Tratar con conceptos inesperados y extraer una comprensión profunda de textos largos y complejos.
Interpretar el significado presente en un texto expresado con lenguaje muy matizado o demostrar una comprensión completa y total del texto.
Acción: Juzgue y evalúe la calidad y relevancia
¿Qué se evalúa?: La familiaridad del estudiantes con las estructuras, los registros y los géneros de los textos.
Determinar la utilidad del texto .
Determine el uso que hace el autor de determinados recursos textuales para alcanzar su fin.
Que describa o comente el estilo empleado por el autor.
Que identifique cuál es el propósito o la actitud del autor.
viernes, 27 de marzo de 2009
Las Evaluaciones Educativas que América Latina Necesita IV

Una vez definida la política de evaluación, es necesario implementarla de acuerdo con diversos estándares apropiados de calidad técnica. Esto implica abordar los siguientes desafíos:
Elaborar un referente o marco conceptual que defina con precisión los conocimientos y desempeños que son considerados apropiados al finalizar el grado o ciclo educativo que será evaluado
Si bien esta construcción exige antes que nada un debate y decisiones de carácter político, las definiciones tomadas en dicho terreno deben luego ser adecuadamente traducidas en especificaciones y estándares de carácter técnico. Asimismo, el debate político-educativo debe estar alimentado por información sobre los avances conceptuales recientes en cuanto a la enseñanza y a los desempeños de los estudiantes en las disciplinas consideradas.
Incluir en las pruebas actividades con diversos grados de complejidad
Se debe contemplar actividades cuya solución requiera de competencias cognitivas suficientemente complejas, apropiadas a los desafíos de la sociedad del conocimiento, así como también actividades sencillas que permitan informar sobre el punto en que se encuentran los estudiantes menos avanzados. Las actividades deben poseer una serie de propiedades psicométricas que es necesario garantizar y cuyo control requiere pruebas piloto y análisis cuidadoso. También es importante, en la medida de lo posible, ampliar el uso de preguntas de respuesta construida, con el doble propósito de evaluar capacidades más complejas y de mejorar la articulación entre la evaluación externa y la cultura docente y escolar.
Conformar las pruebas a partir de la apropiada integración de las actividades en bloques y cuadernillos
Este es un desafío técnico importante y complejo, que requiere de conocimientos especializados y experiencia. Especial atención debe otorgarse a la decisión de utilizar la Teoría Clásica o la Teoría de la Respuesta al Ítem para la construcción y el análisis de las pruebas, lo cual requiere de programas de procesamiento modernos, analistas bien entrenados, análisis rigurosos y asesoramiento de alto nivel.
Definir los “puntos de corte” que establecen los límites entre niveles de desempeño en una prueba
Vinculado con esto, se debe definir la metodología a seguir para establecer cuál de los niveles debe ser considerado como aceptable para un estudiante al finalizar el grado o ciclo educativo evaluado. Un rendimiento aceptable no puede ser establecido automáticamente como equivalente al 51% o más del máximo posible en una prueba.
Diseñar muestras apropiadas a los propósitos de la evaluación
Esto tiene por objeto evitar operaciones más grandes y costosas de las estrictamente necesarias y que, al mismo tiempo, tengan un nivel de precisión adecuado. En relación a este último aspecto debe incluirse, además, la estimación y reporte de los márgenes de error de las mediciones.
Definir cómo se equipararán las evaluaciones
La equiparación de las evaluaciones se refiere a la metodología mediante la cual los resultados de pruebas aplicadas en distintos años se hacen comparables. Este es uno de los desafíos técnicos más importantes que los sistemas de evaluación deben afrontar si uno de sus propósitos es informar sobre los avances o retrocesos en los logros educativos a lo largo del tiempo. Este proceso es indispensable para poder afirmar que los eventuales cambios que se constaten responden a cambios en la realidad educativa y no meramente a cambios en el instrumento de medición. Requiere tomar recaudos tanto desde el punto de vista estadístico, como desde el punto de vista de la continuidad de los conocimientos y competencias evaluadas, y la estabilidad en la longitud y la estructura de la prueba.
Construir datos longitudinales que permitan apreciar la evolución en el tiempo de los aprendizajes de un mismo conjunto de estudiantes
Este tipo de datos, que exigen más de una medición en el tiempo, es el que evalúa el “aprendizaje” entendido como cambio y el que mejor permite establecer cuáles son los procesos propiamente escolares que tienen influencia sobre el mismo. Este enfoque es el que permitiría obtener información más relevante para la política educativa y para la investigación.
Establecer mecanismos de control del cumplimiento de las condiciones estandarizadas que deben regir durante la aplicación de las pruebas
El cumplimiento de las condiciones de aplicación de las pruebas involucra aspectos técnicos complejos y muchas veces descuidados. Sin embargo, son fundamentales para que la información sea confiable y comparable. Esto apunta a temas como:
- La calidad de la capacitación de los aplicadores.
- El establecimiento de controles de calidad durante la aplicación de las pruebas.
- La motivación a los estudiantes para realizar las pruebas.
- La logística de la distribución.
- El retorno seguro de los materiales.
Combinar las evaluaciones con estudios cualitativos
Es importante combinar las evaluaciones nacionales estandarizadas, que ofrecen una mirada sobre el conjunto del sistema, con la realización de estudios cualitativos que permitan profundizar en los procesos escolares y los procesos que ocurren en las aulas. Esta combinación de enfoques es el mejor modo de aportar información rica y compleja para pensar en las políticas educativas y en las prácticas de enseñanza.
La necesaria transparencia
Sobre todos los procesos técnicos debe existir información transparente y accesible. Es necesario dar un especial énfasis a la documentación de los procedimientos técnicos seguidos en:
- La construcción de los instrumentos.
- La estimación de la precisión de las mediciones (y, por consiguiente, su margen de error).
- El diseño de las muestras y la cobertura alcanzada.
- La aplicación y control de calidad de la misma.
- La definición de niveles de desempeño y puntos de corte.
- La equiparación y comparabilidad de los resultados con mediciones anteriores.
Extraído de
http://rinace.net/riee/numeros/vol1-num1/art4_htm.html
Pedro Ravela, Patricia Arregui, Gilbert Valverde, Richard Wolfe, Guillermo Ferrer, Felipe Martínez Rizo, Mariana Aylwin y Laurence Wolff
martes, 10 de febrero de 2009
LA FIABILIDAD DE ENCUESTAS INTERNACIONALES A GRAN ESCALA
medios de los resultados de PISA no suscita confianza en los medios educativos. También hay una serie de problemas metodológicos que resolver y esclarecer como, por ejemplo el modelo de medición utilizado, las condiciones de validez de los ítems del test, la reducción de distorsiones culturales, las cuestiones de traducción, etc. Han sido realizados adelantos considerables en el transcurso de los últimos cuarenta años sobre el plan metodológico y de organización.La calidad de las últimas grandes encuestas internacionales como PISA, PIRLS, TIMSS (Trends in Mathematics and Science) es admirable. Estos estudios son una mina de información sobre los sistemas de enseñanza. Por otro lado, la exigencia de la comparación revela sus fallos. Sin embargo, son insustituibles, ya que no hay otros medios para documentarse sobre las prestaciones de servicios de enseñanza para realizar comparaciones que digan algo válido sobre el estado de salud de un sistema, produciendo datos empíricos que pueden ser discutidos, puestos a prueba o rechazados sin más.
El reverso de la moneda es la tentación de la clasificación para designar a «la chica más bella del reino». Sin embargo, este espejo que nos muestran los estudios internacionales no es perfecto. Es un espejo que deforma. Sólo un esfuerzo considerable y crítico sobre el plan científico podrá ayudar a corregir sus defectos.
Más que nunca, debemos tener un debate democráticamente abierto y una discusión transparente sobre la naturaleza y los límites de estas encuestas. Su calidad es indiscutible, la calidad de las evaluaciones es evidente, las técnicas de muestreo se han perfeccionado, el tratamiento estadístico ha avanzado, sobre todo en lo que se refiere a la metodología de comparaciones internacionales.
Conocemos mejor los límites y las trabas de estos estudios y empezamos a dominarlas mejor. Por lo tanto, una conclusión se impone: si queremos controlar los efectos de estas estrategias y dominar estas operaciones, poder pronunciarnos e influir en ellas, hay que participar, ya que sólo así haremos progresar la ciencia de la educación pero también podremos adquirir un conocimiento íntimo de mecanismos, de luchas de poder, de grupos de presión que bajo bastidores forjan estos estudios. Este conocimiento es indispensable para actuar con eficacia, sin cometer graves errores que restarían cualquier credibilidad a las quejas y a las tomas de posición que habrá que formular ante la comunidad científica.
Traducción: Claudine Corrocher
La más bella del reino: el mundo de la educación en alerta con la llegada de un príncipe encantador
Norberto Bottani
Consultor y analista de políticas de educación
Re2006.pdf
Número extraordinario PISA
http://www.revistaeducacion.mec.es/
jueves, 11 de diciembre de 2008
Cómo parecerse a Finlandia
¿Por qué? Eso mismo se preguntan el resto de sistemas educativos, cuando comprueban edición tras edición que Finlandia lidera una vez más los exámenes de PISA. Y quién mejor para contestar, que la secretaria de Estado del Ministerio de Educación finlandés, Heljä Misukka, que, orgullosa del éxito de su país, enumeró los ingredientes secretos que componen la fórmula del “éxito” educativo. Supongo que es una pregunta que ha tenido que contestar infinidad de veces.
Pero, ¿cuál es el secreto que hace posible
el triunfo de Finlandia en PISA?En primer lugar me gustaría aclarar que para entender el secreto de Finlandia en PISA no podemos hablar de un secreto sino de la sinergia de múltiples factores. Uno de ellos es disponer de profesores altamente cualificados y muy comprometidos con su trabajo. También que la profesión de maestro en nuestro país es muy popular y eso provoca que una gran parte de los jóvenes quieran ser profesores y, a su vez, que las universidades pueden seleccionar candidatos de muy alta calidad.
¿Cómo influye el salario de los maestros, que en otros países suele ser mediocre, en esa amplia demanda?
No afecta especialmente. El salario del maestro en Finlandia se sitúa en la media de los países de la OCDE, pero no es extraordinariamente bueno. Creo que la elección de los jóvenes tiene más que ver con el valor que la sociedad finlandesa le concede a la Educación y la actitud que tiene ante la profesión de maestro, que es muy buena. Y no sólo eso, sino que disponemos de estándares muy descentralizados que permiten a los profesores ser muy independientes en su trabajo. Por ejemplo, pueden elegir los métodos de enseñanza o el tipo de material que prefieren utilizar con sus alumnos y pienso que esto también les motiva. Además, en Finlandia no hay inspectores detrás de la esquina para ver cómo trabajan los maestros. Y esa libertad y confianza les ayuda también en su trabajo.
Aparte del rol que juegan los profesores, ¿qué otros factores contribuyen a que en Finlandia una mayoría de la población posea el título de Bachillerato?
Creo que la gratuidad de la Educación obligatoria es también un factor muy importante. En Finlandia no hay que pagar nada ni por la enseñanza durante los nueves años que componen la obligatoria, pero tampoco por los libros, el material, las comidas escolares, el transporte, el sistema sanitario y el dental. Y también lo es la equidad de nuestro sistema. Para nosotros tan importante como liderar las pruebas de PISA fue comprobar la escasa diferencia que había entre los resultados de los niños y las niñas.
¿Cree que su sistema educativo es posible exportarlo? Mucha gente se pregunta por el éxito de Finlandia en PISA y por el tipo de enseñanza que utilizamos, pero no creo que sea algo tan fácil de imitar. Se pueden copiar algunas cosas, pero habría que cambiar también la actitud de la sociedad ante la Educación, por eso no es tan fácil. En algunos países europeos, como ocurre en España, uno de los principales problemas educativos es que muchos niños fracasan cuando llegan a Secundaria.
¿Cómo cree que se puede luchar contra este fenómeno?
Nosotros también tenemos fracaso escolar en Finlandia. Y para combatirlo en la actualidad estamos intentando crear proyectos de aprendizaje más flexibles. Estamos buscando tipos de aprendizaje específicos para los chicos. Digo chicos porque es curioso, pero a diferencia de los países en desarrollo, donde son las niñas las que abandonan el colegio antes, en los industrializados son especialmente los chicos los que fracasan. Creo que es fundamental flexibilizar la enseñanza.
En el caso en que los estudiantes suspendan ¿apuesta por la repetición del curso?
No, no creo que la repetición sea la solución. Cada niño debería estar en el curso acorde con su edad. Creo que la clave está en prevenir la situación antes de que llegue a producirse. Los profesores deberían ser capaces de detectar qué estudiantes tienen algún tipo de problema y desarrollar diferentes métodos de enseñanza en función de las necesidades de cada niño.
¿Qué consejo nos daría para afrontar PISA 2009 con buen pie?(Risas).
La clave está en disponer de profesores bien cualificados y conseguir que estén motivados con su trabajo. Partiendo de esa base, se puede conseguir mucho.
Consejos para parecerse a Finlandia

Cúmulo de factores
La secretaria de Estado defiende que el secreto de Finlandia no se congrega en un único factor sino en la combinación de varios.
Pesa más el respeto
Los resultados de Finlandia demuestran que para los docentes es mayor incentivo el respeto que les otorga la sociedad que un sueldo excesivo. “En Finlandia el sueldo docente no es extraordinariamente bueno”, reconoce Misukka.
Un sistema igualitario
Las diferencias que en otros países existen en las notas entre niños y niñas o entre regiones en Finlandia son mucho menores. La equidad del sistema finés es otra de sus claves del éxito.
¿Se puede exportar?
La secretaria de Estado reconoce la dificultad de imitar su sistema educativo por basarse en una combinación de factores. Y defiende que tan importante como adoptar sus características es cambiar la concepción que la sociedad tiene de la enseñanza.
Fracaso Escolar
El mal del fracaso escolar también afecta a la elogiada Finlandia. Misukka apuesta por flexibilizar la enseñanza para mejorar los resultados.Prevenir mejor que curar
Finlandia recomienda detectar los problemas antes de tener que subsanarlos; y no aconseja la repetición como estrategia recuperatoria.
Nota aparecida en Magisnet edición digital del magisterio del 11 de diciembre de 2008
http://www.magisnet.com/articulos.asp?idarticulo=3824
domingo, 7 de diciembre de 2008
Cómo ha cambiado el rendimiento de los alumnos en lectura
Tras vislumbrarse ciertos cambios entre PISA 2000 y
PISA 2003, PISA 2006 ofrece información sobre las tendencias del rendimiento en lectura desde PISA 2000, cuando se realizo la primera evaluación completa de la lectura. De este modo, permite a quienes llevan a cabo las políticas educativas, controlar las mejoras en los resultados de lectura, tanto en términos absolutos como relativos a las mejoras en otros países.En los países de la OCDE, el rendimiento en lectura de PISA permanece, por lo general, similar entre PISA 2000 y PISA 2006. Este hecho, en si mismo, es digno de mención, ya que la mayoría de los países han incrementado notablemente su inversión en educación en los últimos anos. El gasto por alumno de educación primaria y secundaria en los países de la OCDE aumento una media del 39 % en términos reales. En el breve periodo entre el ano 2000, fecha de la realización de la primera evaluación PISA, y 2004, el aumento medio del gasto por alumno ascendía al 22 %, y en 6 países de la OCDE, a porcentajes entre el 30 y el 61 %.
Los datos muestran, asimismo, que algunos países han alcanzado importantes mejoras en los resultados de lectura, y algunos de ellos con un moderado incremento del gasto.
Dos países de la OCDE (Corea y Polonia) y cinco economías o países asociados (Chile, Liechtenstein, Indonesia, Letonia y Hong Kong-China) han experimentado mejoras en el rendimiento en lectura desde PISA 2000.
• Corea mejoro su rendimiento en lectura entre PISA 2000 y PISA 2006 desde un nivel que ya era alto, de 31 puntos, hasta alcanzar el rendimiento mas alto de todos los países participantes, sobrepasando incluso a Finlandia, cuyo rendimiento se mantuvo estable en un nivel alto. Corea alcanzo esta mejora, básicamente, aumentando los niveles de rendimiento entre los alumnos con los mejores resultados, mientras que el rendimiento en los extremos más bajos de la escala prácticamente no cambio.
Efectivamente, en el percentil 95, por encima del cual solo puntúa el 5 % constituido por los mejores alumnos, el rendimiento en lectura aumento en 59 puntos, llegando a los 688 puntos; en el percentil 90 el aumento fue de 55 puntos y en el percentil 75, de 44 puntos. Por el contrario, no hubo en Corea ningún cambo significativo en los percentiles 5 y 10. Las autoridades coreanas atribuyen esta mejora en el rendimiento en lectura a un nuevo currículo, en el que las pruebas de tipo ensayístico han ganado importancia. Además, las universidades han introducido y extendido también la evaluación de ensayos en sus pruebas de admisión, dando a los alumnos la posibilidad de expresar sus propios pensamientos y opiniones. Esto ha proporcionado a los alumnos de secundaria con mejores notas un incentivo adicional para mejorar sus competencias en lectura y razonamiento, con el fin de acceder a la universidad que ellos elijan.
• Hong Kong-China es otro de los países que ha experimentado una mejora notable, con un incremento de 11 puntos desde PISA 2000, desde un nivel de rendimiento en lectura que ya era alto, alcanzando 536 puntos en PISA 2006. Aquí el cambio vino dado principalmente por mejoras en los alumnos con resultados mas bajos, con un incremento de 21 puntos en el percentil 5 y en menor medida en otros percentiles.
• Polonia aumento su rendimiento en lectura en 17 puntos entre PISA 2000 y PISA 2003 y otros 11 puntos entre PISA 2003 y PISA 2006, y ahora tiene un rendimiento de 508 puntos, por primera vez claramente por encima de la media de la OCDE. Entre estas dos evaluaciones, Polonia mejoro su rendimiento global básicamente a través de un mejor rendimiento en el sector inferior de la escala (es decir, los percentiles 5, 10 y 25). Como resultado, en PISA 2003 menos del 5 % de los alumnos tuvo un nivel de rendimiento inferior al del 10 % peor de los alumnos polacos en PISA 2000. Análisis mas profundos a nivel nacional han asociado esta mejora a la reforma del sistema educativo de 1999, que ahora proporciona estructuras educativas mas integradas. Desde PISA 2003, el rendimiento en Polonia ha mejorado mas uniformemente en todo el espectro de la evaluación.
• De los demás países que han experimentado mejoras significativas en la lectura entre PISA 2000 y PISA 2006 –Chile (33 puntos mas entre PISA 2000 y PISA 2006), Liechtenstein (28 puntos), Indonesia (22 puntos) y Letonia (21 puntos)– todos, excepto Liechtenstein, tienen una puntuación notablemente inferior a la media de la OCDE.
Una serie de países vio descender su rendimiento en lectura entre PISA 2000 y PISA 2006: nueve países de la OCDE (en orden descendente), España, Japón, Islandia, Noruega, Francia, Australia, Grecia y México, y cinco países asociados, Argentina, Rumania, Bulgaria, Federación Rusa y Tailandia. En Francia, Japón y México, así como en el país asociado Tailandia, por ejemplo, el rendimiento disminuyo ligeramente en el sector superior de la escala, pero de forma marcada en el sector inferior. Es de notar que, entre los países con rendimientos superiores a la media, solo Australia ha experimentado un empeoramiento estadísticamente significativo, de 15 puntos, en el rendimiento de sus alumnos en lectura, atribuible a una disminución en el sector superior de la escala. Los demás países con un empeoramiento significativo en el rendimiento en lectura entre PISA 2000 y PISA 2006 tienen medias similares o inferiores a la media de la OCDE. De estos últimos, Japón e Islandia tuvieron en el pasado un rendimiento superior a la media de la OCDE. En la Republica Checa, los alumnos con los rendimientos más altos han mejorado, mientras que el rendimiento empeoro en el sector inferior de la escala. En Suiza, los niveles de rendimiento subieron en el sector inferior de la escala.
PISA y la evaluación de las matemáticas
Se presentan tres cuestiones matemáticas como pretexto para analizar el papel del
«realismo» (en énfasis en la aplicabilidad de las matemáticas a las situaciones de la vida cotidiana) en el contexto de las pruebas PISA.
UN PROBLEMA ELEMENTAL
Consideremos el siguiente problema elemental, que hemos creado para esta ocasión:
Vamos a comprar azulejos de dos tipos, A y B, en unas cantidades determinadas por la obra que estamos haciendo (una reforma de la cocina de la casa, por ejemplo, que requiere azulejos en el suelo y en las paredes).
Los del tipo A cuestan (impuestos incluidos) 15 euros/m2, esto es, la tercera parte que los del tipo B, que cuestan 45 euros/m2. Necesitamos comprar 10 m2 del tipo A y 15 m2 del tipo B. En un comercio hay una oferta y nos hacen una rebaja del 15% en los del tipo A y del 10% en los del tipo B. En otro comercio, con los mismos precios para los distintos tipos de azulejo, la rebaja que aplican es, simplemente, del 12% del gasto global que hagamos.
¿Dónde resultará más económico realizar la compra?
El planteamiento de problemas de este tipo tiene un aire inequívocamente decimonónico, aunque aquí hablemos de euros y no de céntimos ni pesetas. Se trata de problemas que hoy, como antaño, pretenden referirse a situaciones de la vida «real», en las que el ciudadano tiene que (o tendría que) usar las matemáticas aprendidas en la enseñanza obligatoria. Esto es, son problemas que buscan plantear situaciones prácticas en las que la formación matemática recibida por una persona se revele necesaria (y suficiente), no sólo para encadenar una serie de operaciones aritméticas elementales, sino también –y sobre todo– para tener un estado de ánimo dispuesto a enfrentarse con la información numérica, para considerarse con la capacidad necesaria para ordenarla y estructurarla y para tener la seguridad de que los resultados obtenidos van a permitir a esa persona elegir la opción más ventajosa para su bolsillo.
El problema que aparece arriba, trivial y de corte tradicional para nuestro país, no es una de las cuestiones, mucho más sofisticadas en ocasiones, propuestas en las pruebas PISA. Pero puede analizarse desde ese prisma. Así, cuando PISA 2003 habla de competencias matemáticas, se refiere a identificar y comprender el papel que las matemáticas desempeñan en el mundo, realizar razonamientos bien fundados y usar e implicarse en las matemáticas en aquellos momentos en los que se presenten necesidades en la vida de cada individuo como ciudadano constructivo, comprometido y reflexivo.
Ahora bien, comprender el papel de las matemáticas conlleva, en particular, saber que el resultado de una serie de cálculos y disquisiciones –como las que hacen falta para resolver el problema de la rebaja en el precio de los azulejos– no será, simplemente, una satisfacción para la mente, sino que va a tener unas consecuencias para nuestra economía. También podemos decir que utilizar e involucrarse en las matemáticas significa que, ante una serie de datos numéricos (los metros cuadrados y el precio de cada tipo de azulejo, el porcentaje de descuento, etc.), la competencia matemática adquirida nos va a proporcionar el ánimo suficiente para tratar de abordar el problema por nuestros propios medios. Finalmente, realizar razonamientos bien fundados puede referirse, en este contexto, a la capacidad para plantear y efectuar adecuadamente la secuencia de operaciones que deben conducir a la solución del dilema sobre ¿dónde resultará más económico realizar la compra? Así pues, podemos concluir que se trata de un problema que podría medir, en cierto modo, algunos aspectos del tipo de competencia matemática de la que se habla en PISA.
Ignoro cuál sería el porcentaje de estudiantes españoles, al término de su educación obligatoria, que resolverían correctamente este problema. Ignoro, asimismo, el porcentaje de compatriotas adultos que se atrevieran a intentar solucionarlo y que, finalmente, lo lograran.
Desde luego, una forma de abordar el problema consiste en calcular el precio bruto de los azulejos del tipo A en la primera tienda (15 euros/m2 x 10 m2 = 150 euros) y del tipo B (45 euros/m2 x 15 m2= 675 euros). Luego restamos el descuento correspondiente (15% de 150 euros + 10% de 675) resultando 735 euros. En el caso de la segunda tienda tendremos que el coste global es de 150 + 675 = 825 euros, a los que tendremos que restar el 12%, arrojando un total de 726 euros, por lo que es éste el comercio que ofrece más ventajas.
UN PROBLEMA DE PISA 2000
Un segundo problema que quisiera proponer a la consideración del lector es el siguiente (INECSE, 2004, pp. 55-56). Se muestra un gráfico velocidad/espacio con la velocidad de un coche de carreras en una pista llana, de 3 Km. de longitud, durante la segunda vuelta.
FIGURA I

Las preguntas que el alumno debe contestar en este caso son del tipo ¿cuál es la distancia aproximada desde la línea de salida hasta el comienzo del tramo recto más largo que hay en la pista? O del tipo siguiente: Aquí están dibujadas cinco pistas: ¿En cuál de estas pistas se condujo el coche para producir el gráfico de velocidad mostrado anteriormente?
FIGURA II
S: Línea de salida

Parece evidente que esta situación ya no tiene el aroma decimonónico del problema de la primera sección. No sólo porque no era posible, en aquella época, hablar de coches de carreras, sino porque el análisis cualitativo (nótese que el problema no incluye el dato preciso de la función v=f(e), cuyo grafo se supone que está representado en la figura I) de gráficas no se consideraba parte de las competencias matemáticas básicas. Hoy día, ciertamente, la mayoría de los ciudadanos estamos en contacto, a través de los medios de comunicación, con imágenes y argumentos de este tipo.
La solución de las dos cuestiones que hemos planteado en este punto podría ser la siguiente. En primer lugar, parece razonable suponer que un coche de carreras mantiene la velocidad más alta durante los tramos rectos, mientras que baja en cada curva. Así pues, según la figura I, el circuito ha de tener tres curvas, siendo la más acusada la segunda que aparece tras el paso por la línea de salida. Además el tramo recto que incluye a la línea de salida parece el más corto (como se aprecia en la figura I, si unimos el final y el principio de la gráfica). Por tanto el circuito B de la figura II podría ser el modelo adecuado para esta situación. Por otra parte parece que, en la figura I, el coche comienza a acelerar a los 1,5 km. del punto de salida para alcanzar el tramo más largo de velocidad alta; luego esta puede ser la distancia desde la salida al tramo recto más largo de la pista.
En este caso sí es posible conocer cómo han resuelto los alumnos españoles de 15 años estas dos cuestiones. La respuesta correcta a la pregunta ¿En cuál de estas pistas se condujo el coche para producir el gráfico de velocidad mostrado anteriormente? fue obtenida sólo por un 23% de alumnos españoles, frente a un 28,3% de media en la OCDE. Análogamente, hubo sólo un 65% de respuestas correctas de los alumnos españoles, frente a un 66,9% de media en la OCDE, para la pregunta ¿Cuál es la distancia aproximada desde la línea de salida hasta el comienzo del tramo recto más largo que hay en la pista?
UNA PREGUNTA DE PISA 2003
Una tercera y última cuestión, esta vez de las pruebas PISA 2003 (INECSE 2005, p. 36) que quisiera comentar someramente y resumiendo algo su enunciado, pregunta cuáles de la siguientes figuras tienen perímetro menor o igual que 32 metros.
FIGURA III

La respuesta correcta es «las figuras A, C, D», y fue obtenida por un 12,9% de alumnos españoles, frente a un 20% de media de la OCDE. Para aceptar las figuras A, C y D como solución, se ha de observar que la suma de las longitudes horizontales de los tramos de una escalera coincide con la longitud horizontal total, medida desde el inicio hasta el fin de la misma; lo mismo sucede con la suma de las alturas de los escalones, que ha de coincidir con la altura total de la escalera. Además, se puede apreciar que, para descartar el caso B, la longitud de una línea oblicua (tal como una escalera de mano apoyada en el suelo y contra una pared) es mayor que la de una línea recta que tenga la misma base y alcance la misma altura.
LA CRECIENTE IMPORTANCIA DE LAS COMPETENCIAS PARA LA VIDA
¿Qué podemos decir sobre PISA y la evaluación de las matemáticas, en vista de estas cuestiones y de los resultados obtenidos por nuestros alumnos?
En primer lugar, podemos señalar que todas estas cuestiones pretenden medir las capacidades de analizar, razonar y comunicar eficazmente, puestas en juego por los estudiantes en situaciones usuales de la vida cotidiana que involucran matemáticas; y no sólo, ni principalmente, en conocer cuáles contenidos del currículo han aprendido.
Es importante subrayar la doble negación («no sólo, ni principalmente…») de la última frase, porque está en línea con la interpretación rupturista que algunos colectivos están haciendo, en nuestro país, de la evaluación de las matemáticas en PISA. Esta interpretación viene a decir que, tradicionalmente, en el sistema escolar nos hemos limitado a medir lo que el alumno «sabe»; ahora PISA está midiendo lo que realmente «sabe hacer»… y por eso obtenemos resultados tan pobres.
No es un hecho aislado. De un tiempo a esta parte parece plantearse, implícitamente, una minusvaloración del contenido curricular (esto es, de la organización del aprendizaje a través de unos ítems concretos en un programa) y una sobrevaloración de los objetivos finales y generales del currículo, tales como la adquisición de competencias para enfrentarse a problemas de la vida cotidiana, de modo que esta noción va ganando, aceleradamente, terreno entre determinados sectores de la comunidad educativa. Resulta curioso observar, a título de ejemplo, que el currículo de la ESO y el de Bachillerato de mi propia comunidad autónoma (posiblemente no muy dispar del de otras muchas), publicado en 2002, sólo menciona dos o tres veces la palabra «competencias», y, estas pocas menciones están limitadas al ámbito de la enseñanza de la lengua o de los idiomas.
Mientras, el borrador de la LOE (MEC, 2005) incluye la palabra «competencia» al menos medio centenar de veces. En el mismo sentido podemos observar cómo la Ley de Calidad de la Educación (BOE, 2002) incluye sólo cuatro veces la expresión «competencias básicas», frente a las más de 30 apariciones de esa expresión en la LOE.
Dejando al margen la influencia en este asunto del cambio de partido político en el Gobierno (menor en la práctica de lo que se piensa), a lo largo de los últimos años, hay un doble argumento para explicar esta tendencia. La necesidad de armonizar los sistemas educativos europeos plantea, ante la imposibilidad de hacer concordar los currículos, el ineludible establecimiento de unos niveles de referencia respecto de lo que los alumnos deben acabar «sabiendo hacer», con independencia de cómo y en qué orden y de qué manera lo hayan aprendido en cada país. Por otro lado, el logro de la competencia matemática para enfrentarse a situaciones reales se presenta como algo objetivo y objetivamente deseable, muy por encima de la organización de los contenidos curriculares que se adopte en un país y momento dado, frecuentemente sesgada o lastrada por el peso de las tradiciones, personalidades y escuelas dominantes en cada circunstancia.
Creemos que se trata de una noble ilusión. No sólo porque el currículo tradicional de matemáticas vigente incluye, desde hace años, como proyecto fundamental, la adquisición de esas competencias en situaciones problemáticas cercanas al alumno (con otra terminología distinta, pero concomitante, tal como «destrezas» en vez de «competencias»), sino porque también incluye ya, como criterio de evaluación, diversas referencias explícitas a la consecución de las competencias matemáticas básicas (ya sea con esta terminología o con otra distinta). El problema es que el sistema educativo no sabe (o no ha sabido, o no ha podido, o no ha querido hasta ahora) hacerlo mejor. Y la situación no va a cambiar, simplemente, porque enfaticemos, tras los resultados de PISA 2003, que nuestros alumnos deberían adquirir, en la medida que nosotros desearíamos, esas competencias. ¿Cómo lograrlo? Más horas de matemáticas, una metodología más activa, una recuperación del enfoque preconizado por la LOGSE y que nunca pudo realmente llevarse al aula –por falta de recursos, por vaivenes políticos–, etc. son algunas de las soluciones reiteradamente propuestas. Sin embargo, no son, en absoluto, propuestas nuevas y no es evidente que las circunstancias actuales permitan su implementación generalizada.
REALISMO COMO MANIERISMO
Pero no es sólo una ilusión esta reivindicación de una enseñanza de las matemáticas «basada en competencias» como método novedoso para mejorar, en el futuro, los resultados de PISA. Lo es también, en mi opinión, la percepción de que la competencia matemática es algo objetivo y objetivamente evaluable mediante pruebas como las que se incluyen en PISA.
Es cierto que nuestros alumnos aprenden, en general, unas matemáticas tamizadas por el contexto escolar y que responderían mucho mejor si las pruebas se refiriesen a los tipos de problemas y cuestiones que acompañan habitualmente a la enseñanza de los distintos contenidos del programa. Los alumnos, en el caso más favorable, saben de lo que han aprendido, pero –salvo excepciones notables– sólo en el mismo contexto en el que lo han aprendido.
También es cierto que la enseñanza escolar (y universitaria) de las matemáticas está alejada de «las situaciones usuales de la vida cotidiana que involucran matemáticas» a las que hacíamos referencia antes.
No es obvio el que, para aprender a resolver «las situaciones usuales de la vida cotidiana que involucran matemáticas», deba enseñarse de un modo radicalmente diferente (mientras se mantengan las condiciones actuales en el sistema educativo).
Es posible que un esfuerzo poco meditado de aproximación, desde el sistema educativo, hacia «las situaciones usuales de la vida cotidiana que involucran matemáticas», acabe contextualizando las mismas como ejercicios escolares alejados de la vida real.
De este modo, es posible que, contradictoriamente, se acaben adquiriendo menos competencias –que con la enseñanza actual– para enfrentarse, fuera del marco escolar, a los problemas reales.
En efecto, el pretendido «realismo» matemático de muchas de las pruebas PISA es una suerte de manierismo, una peculiar –aunque atractiva– interpretación escolar de la realidad, pero, a veces, tan alejada de ella como los problemas de grifos y obreros que eran tradicionales para el aprendizaje de las reglas de tres (directa e inversa) hace 50 años.
Por ejemplo, en la primera cuestión con la que abríamos este artículo, es evidente que un ciudadano, en la vida cotidiana, resolvería la pregunta allí planteada simplemente solicitando en cada tienda el presupuesto correspondiente y comparando las dos cifras obtenidas. También es evidente que, en la segunda cuestión, cualquier artículo periodístico sobre una carrera de coches va a ofrecer, como dato más relevante, el trazado del circuito (mucho antes que el gráfico velocidad/espacio), con el que un aficionado al motor va a poder responder directamente a las preguntas planteadas. Y, en lo que se refiere a la tercera pregunta, el propio informe PISA reconoce que se trata de un ítem en un contexto educativo.
Las matemáticas, como es bien conocido, están cada vez más presentes, pero también más ocultas, en la vida cotidiana de los países avanzados. Se trata de algo parecido a lo que ocurre con la mecánica automovilística popular: ahora hay más coches y se usan más que nunca, pero las oportunidades para que un ciudadano ejerza, en la práctica, su competencia sobre mecánica del automóvil, ha disminuido (afortunadamente): los coches tienen menos averías y las que se producen no pueden resolverse con unos conocimientos básicos.
Creo que sería muy interesante conocer el resultado de las pruebas PISA sobre una población de ciudadanos adultos, inequívocamente «constructivos, comprometidos y reflexivos», para valorar en su justa medida los resultados alcanzados por nuestros adolescentes. Estoy seguro de que, si se hiciera ese experimento, la valoración de la sociedad hacia su sistema educativo sería bien distinta. Hace tiempo realicé una pequeña encuesta a un colectivo de catedráticos de universidad (ciudadanos constructivos, etc.) de variadas disciplinas (no científicas) sobre su capacidad para hallar el valor de la suma de las fracciones 1/3+1/6, una competencia que asumimos con toda naturalidad como integrante de la enseñanza obligatoria. Sin embargo, la mayor parte de estos ciudadanos, sin duda reflexivos, no era capaz de abordar el problema ni, mucho menos, de resolverlo.
Es algo natural: no hay que escandalizarse, sino reflexionar sobre el papel real de las matemáticas en la enseñanza obligatoria. Tal vez, en el fondo, la valoración de PISA se ve sesgada en función de la proximidad de la tradición de la enseñanza de las matemáticas de un país a la tradición de la enseñanza de las matemáticas «realistas», una transposición escolar de la realidad tan interesante como otra cualquiera, pero nada más.
UNA REVISIÓN DE LAS CUESTIONES PLANTEADAS
Sin embargo, es necesario mejorar la competencia matemática de nuestros alumnos, aunque no lleve el marchamo utilitario (alfabetizador) que PISA presenta como banderín de enganche. Desde luego, se puede lograr proporcionándoles las herramientas matemáticas necesarias para los pequeños problemas matemáticos que se pueden encontrar en el mundo actual, pero, tal vez, en unas disciplinas de educación para la ciudadanía o para la vida social, donde la conexión con la realidad sea mas natural y mas directa. Y, en matemáticas, pero justamente en un sentido contrario al que planteábamos inicialmente.
Reconsideremos la primera cuestión, libres ya de la pretendida utilidad práctica de la misma. Lo interesante, matemáticamente hablando, de esa cuestión es pensar en cómo podemos resolverla de una manera más eficiente que la que se ha detallado en la primera sección de este artículo. Por ejemplo, ¿podemos contestar a la pregunta formulada sin saber exactamente la cantidad de azulejos de cada tipo que tenemos que comprar? ¿Y si sólo recordamos que los del tipo A cuestan un tercio que los del tipo B, pero no sabemos el precio exacto de cada tipo de azulejo? Se trata de encontrar un procedimiento de pre-cálculo, una fórmula en función de ciertos datos que varían fácilmente, con lo que podríamos resolver este mismo problema en unos pocos pasos y en multitud de instancias.
Pero el enfoque algorítmico y el análisis de la complejidad de los mismos, a pesar de las recomendaciones de la Comisión Internacional para la Instrucción Matemática (ICMI) y a pesar de la importancia de los ordenadores en la vida actual, no parece despertar el interés de la comunidad educativa.
En relación con la segunda cuestión, tal vez podamos plantearnos cómo es posible que, entre los puntos kilométricos del circuito 0,4 km. y 0,6 km. el gráfico velocidad/espacio siga un tramo recto, casi como la bisectriz del primer cuadrante.
¿Puede un coche efectuar un recorrido siguiendo cualquier gráfico que dibujemos arbitrariamente? ¿Es realmente posible que un coche actual siga, durante un tramo, una trayectoria próxima a la recta v=e? ¿Es, en definitiva, «realista » el gráfico ofrecido? Si uno tuviera los gráficos de varios coches, ¿cómo podría deducir cuál ha ganado la carrera? Esto es más fácil con un gráfico espacio / tiempo. ¿Cómo obtener éste a partir del gráfico velocidad/espacio? Son estas cuestiones bastante complicadas: tal vez la competencia matemática consista, entre otras cosas, en intuir su complejidad y en no formular, por tanto, un problema, supuestamente elemental, en estos términos.
Por último, sobre la tercera cuestión, podemos imaginar –tratando de resolverla, en un ejercicio mental– que la escalera que forma uno de los lados de la figura A tiene cada vez más peldaños, que empieza en la mitad del lado de arriba, justo donde llega la flecha que aparece en la figura III y acaba en el vértice de abajo a la derecha de la misma, como se muestra en la figura IV.
FIGURA IV

Ya sabemos que la longitud de ese lado, por muchas vueltas que demos, va a ser igual a cinco (dado que empieza en la mitad de un lado de longitud 10), más seis (dado que tiene que descender una altura de seis metros), es decir, 11 metros. Ahora bien, conocemos el teorema de Pitágoras y sabemos que la línea oblicua que va del punto medio del lado de arriba al vértice inferior derecho mide la raíz cuadrada de 52+62, es decir, algo más que 7,8. Y, sin embargo, una escalera de escalones muy pequeños se aproxima, midiendo siempre 11, tanto como queramos a esa diagonal que mide 7,8. ¿Cómo es esto posible?
Tal vez sea en esa trascendencia a los datos concretos y en la capacidad para imaginar situaciones imposibles donde se encuentre, precisamente, la competencia matemática real. Saber qué matemáticas precisa un ciudadano constructivo, comprometido y reflexivo, es mucho más difícil de lo que parece.
Tomás Recio
Universidad de Cantabria
Texto completo en:
http://www.revistaeducacion.mec.es/re2006/re2006_15.pdf


