Mostrando entradas con la etiqueta ciencias. Mostrar todas las entradas
Mostrando entradas con la etiqueta ciencias. Mostrar todas las entradas

martes, 28 de mayo de 2013

PISA en el área de Ciencias

Las pruebas de rendimiento académico PISA abarcan las áreas de Matemática, Comprensión Lectora y Ciencias. En esta publicación nos ocuparemos de esta última ¿Qué entiende por “formación científica”? ¿Cómo considera la “competencia en Ciencias”? ¿Qué evalúa esta prueba?


Como es conocido, el modelo de evaluación comparativa de PISA se caracteriza por ser muestral (estudiantes de 15 años) y cíclico (trienal), a través de tres áreas principales de evaluación: Lectura (2000), Matemáticas (2003) y Ciencias (2006). Bajo este modelo, la prueba está diseñada para conocer las habilidades de los estudiantes para analizar y resolver problemas, tratando de ofrecer un perfil de las capacidades de los estudiantes de quince años de todos los países donde se aplica. Por otra parte, aunque PISA reconoce en sus fundamentos su pretensión de incidir en las políticas educativas, no debemos olvidar que también reconoce no estar ligado al currículum ni a planes de estudios específicos. Lo que pretende PISA, en definitiva, es evaluar ‘competencias’, cuya aproximación empírica en el área de Ciencias se realiza interrogando a los estudiantes sobre su capacidad para identificar cuestiones científicas, explicar fenómenos científicamente y utilizar las pruebas científicas. En este sentido, desde los fundamentos teóricos de PISA en el área de Ciencias, destaca el enfoque de evaluación en torno a la ‘aplicación’ del conocimiento versus a la ‘memorización de conceptos’).


Cabe destacarse que, en el área de Ciencias, PISA muestra una aparente evolución en su fundamentación teórica desde el año 2000, en la que se hablaba de “formación científica” sin alusión al concepto de “competencia” (OCDE, 2002). Posteriormente, tras el Informe de DeSeCo (2002), en PISA-2003, se empieza a abordar la noción de “competencia científica”, aunque en los mismos términos que en el año 2000, es decir, como un sumatorio de conocimientos, procesos y situaciones o contextos (personal, público y global) (OCDE, 2004). Finalmente, en el 2006, año específico de evaluación en el área de Ciencias, se introduce el concepto de “competencia científica” aplicado a un individuo concreto, manteniendo el objetivo de evaluar ‘conocimiento’ (conceptos) y ‘aplicación del mismo’ a una situación o contexto (capacidades) y añadiendo, como única novedad, la ‘disposición’ (actitud) del alumnado hacia las pruebas y el conocimiento científico (OCDE, 2006).


De este modo, PISA-2006 trata de poner de manifiesto las competencias científicas a través del dominio de los procedimientos científicos que están en la base de las preguntas, la comprensión de las capacidades que están presentes en su resolución y la valoración de las actitudes que presenta el alumnado hacia la ciencia actual. Así, PISA evalúa el conocimiento científico a través de tres dimensiones:

a) Los procesos o destrezas científicas;

b) Los conceptos y contenidos científicos; y

c) El contexto en que se aplica el conocimiento científico.


Por otra parte, PISA identifica cinco procesos científicos:

Reconocer cuestiones científicamente investigables;

identificar las evidencias necesarias en una investigación científica;

extraer o evaluar conclusiones; comunicar conclusiones válidas;

demostrar la comprensión de conceptos científicos en determinadas situaciones.


Estos procesos científicos se organizan en tres grupos de competencias según el tipo de capacidad de pensamiento predominante que se requiere para resolver las preguntas que se presentan:

a) Descripción, explicación y predicción de fenómenos científicos;

b) Comprensión de la investigación científica; y

c) Interpretación de evidencias y conclusiones científicas.


Esta compartimentación de la competencia en áreas y capacidades, que finalmente son las que pretende evaluar PISA, supone, a nuestro juicio, un distanciamiento de la concepción holística del concepto de competencia definido por DeSeCo, siendo difícil entender que este sistema analítico evalúe la competencia científica como la define PISA: “La capacidad de emplear el conocimiento científico para identificar preguntas y extraer conclusiones basadas en hechos, con el fin de comprender y poder tomar decisiones sobre el mundo natural y sobre los cambios que ha producido en él la actividad humana” (OCDE, 2006).





Extraído de
Gallardo-Gil, Monsalud; Fernández-Navas, Manuel; Sepúlveda-Ruiz, María-Pilar; Serván, María-José; Yus, Rafael & Barquín, Javier (2010).
PISA y la competencia científica: Un análisis de las pruebas de PISA en el Área de Ciencias. RELIEVE, v. 16, n. 2, p. 1-17. http://www.uv.es/RELIEVE/v16n2/RELIEVEv16n2_6.htm

martes, 19 de marzo de 2013

Evaluaciones PISA de Ciencias ¿Cumple con sus propósitos?

Las evaluaciones en Ciencias es una de las que desarrolla el programa PISA. En este artículo presentamos una opinión sobre estas pruebas ¿Puede una evaluación estandarizada ser adecuada, para cumplir con sus propósitos? ¿Mide Calidad Educativa o rendimiesto escolar? ¿Qué deberían hacer los países implicados?


PISA pretende establecer un marco común, internacional, de evaluación del rendimiento de los estudiantes de quince años, entendido como nivel de competencia. Bajo el concepto de ‘competencia’, PISA ha tratado de promover la valoración de la ‘utilidad’ y ‘aplicación’ del conocimiento sobre la reproducción en la formación de la competencia, analizando y especificando los conocimientos, capacidades y actitudes que intervienen en la formación de la competencia científica. Sin embargo, en nuestro análisis, encontramos bastantes limitaciones de cara la evaluación de la competencia científica en los términos que define el propio programa PISA –como un ‘saber hacer complejo’–. En este sentido, consideramos que se debería potenciar una aproximación más holística e interdisciplinar a las competencias, en tanto que encontramos una falta de correspondencia entre el concepto de competencia que plantea DeSeCo y la forma en que PISA las evalúa finalmente, fragmentándolas en disciplinas, capacidades, habilidades y destrezas; alejándose de las capacidades de orden superior como son la transferencia, la heurística y la argumentación; haciendo, en definitiva, que la competencia pierda su sentido. Es posible que la pretensión de someter a estas pruebas a un análisis estadístico convencional obligue a los diseñadores a demandar ejercicios de respuestas cerradas para facilitar la corrección de los mismos y evitar el componente de subjetividad que conlleva una valoración.


Por otra parte, consideramos que se debería aprovechar todo el potencial crítico de las preguntas, en tanto que un artificio llamativo de las pruebas de PISA parece ser la restricción de los problemas a temas puramente académicos, con escasa o nula conexión con los temas transversales y de la ‘vida real’. Es cierto que algunas actividades plantean cuestiones de salud y medio ambiente, pero no profundizan en ellas, no plantean preguntas que revelen en profundidad la actitud del alumno/a, ni plantean reflexiones o dilemas éticos ligados a la actividad científica.


En otro orden de cosas, consideramos que permitir el acceso a material de consulta para responder las preguntas debe ser un recurso imprescindible para la evaluación de competencias; el alumnado, desde este punto de vista, debería tener a su alcance todo tipo de información.


A modo de conclusión final, cabría preguntarse para futuras investigaciones si este modelo de evaluación de competencias que plantea PISA (mediante pruebas estandarizadas) es o debe ser el más adecuado para las finalidades que se proponen desde el propio Programa de evaluación. Algunas de las dificultades que hemos visto a lo largo de todo el artículo, podrían resultar insalvables para una prueba de estas características: la relevancia del contenido de las pruebas, la corrección objetiva de preguntas que pudieran plantear argumentación y/o heurística, etc. Por lo tanto, estamos en condiciones de esgrimir la necesidad de otros modelos más acordes para la evaluación de competencias educativas en sentido holístico, poniendo en duda, por tanto, si la solución a la evaluación de competencias está en el perfeccionamiento de la prueba PISA o en el modelo elegido para la evaluación de las mismas. Tal vez los países implicados debieran acudir a enfoques cualitativos que permitieran la observación del comportamiento de los adolescentes en situaciones naturales para matizar los resultados estadísticos globales, puesto que en el horizonte no se atisba una desaparición de estos análisis mundiales.



Extraído de
Gallardo-Gil, Monsalud; Fernández-Navas, Manuel; Sepúlveda-Ruiz, María-Pilar; Serván, María-José; Yus, Rafael & Barquín, Javier (2010).
PISA y la competencia científica: Un análisis de las pruebas de PISA en el Área de Ciencias. RELIEVE, v. 16, n. 2, p. 1-17. http://www.uv.es/RELIEVE/v16n2/RELIEVEv16n2_6.htm

lunes, 12 de diciembre de 2011

Porcentaje de estudiantes en los niveles más bajos en la prueba de ciencias

En el gráfico de barras que figura a continuación, se muestran los porcentajes de alumnos de 15 años que alcanzaron los más bajos niveles de rendimiento en las pruebas PISA de ciencias.
Surge a simple vista, que en Latinoamérica el porcentaje de alumnos es diez veces mayor que en extremo oriente, y además la mayoría de los alumnos de esta parte del mundo está en esa situación.
Si usamos la evaluación para buscar mejoras, la primera pregunta debe ser ¿Por qué los alumnos aprenden tan poco? ¿Necesitamos una "Educación asiática"? ¿O una "Europea"? Creo que no, hace falta nuestra propia solución, que ayude a revalorizar los aprendizajes a la sociedad en su conjunto.
Luego del gráfico, coloco la definición de Competencia Científica según los expertos del OCDE y la caracterización de los niveles de rendimiento.


Competencia Científica según la OCDE
De acuerdo con la definición de los especialistas convocados por la OCDE, la competencia científica incluye los conocimientos científicos y el uso que de esos conocimientos haga un individuo para identificar preguntas, adquirir nuevos conocimientos, explicar los fenómenos científicos y sacar conclusiones basadas en evidencias, sobre asuntos relacionados con la ciencia.
Las tres sub-competencias implicadas en la definición anterior, podrían delimitarse de la siguiente manera.
1. Identificar asuntos o temas científicos. Implica reconocer los asuntos que es posible investigar científicamente. Identificar palabras clave para buscar información científica. Reconocer los rasgos fundamentales de una investigación científica.
2. Explicar científicamente los fenómenos. Requiere de aplicar el conocimiento de la ciencia a determinadas situaciones. Describir o interpretar los fenómenos científicamente y predecir cambios. Identificar las descripciones, explicaciones y predicciones apropiadas.
3. Usar la evidencia científica. Que incluye interpretar evidencia, sacar conclusiones y comunicarlas. Identificar las hipótesis, la evidencia y los razonamientos que subyacen a las conclusiones. Reconocer las implicaciones sociales de los desarrollos científicos y tecnológicos.

Niveles de rendimiento, caracterización
En el nivel 6, los estudiantes identifican, explican y aplican, de manera consistente, el conocimiento científico y el conocimiento sobre la ciencia en una variedad de circunstancias complejas de la vida. Pueden relacionar diferentes fuentes de información y explicaciones, y utilizar la evidencia de estas fuentes para justificar la toma de decisiones. Demuestran clara y consistentemente un pensamiento y razonamiento científicos avanzados, y demuestran la voluntad de utilizar su entendimiento científico a favor de soluciones a problemas científicos y tecnológicos poco comunes para ellos. Los estudiantes en este nivel utilizan el conocimiento científico y desarrollan argumentos a favor de recomendaciones y decisiones para resolver situaciones personales, sociales o globales.

En el nivel 5, los estudiantes identifican los componentes científicos de muchas situaciones complejas de la vida y aplican tanto los conceptos científicos como el conocimiento acerca de la ciencia a dichas situaciones, y pueden comparar, seleccionar y evaluar la evidencia científica adecuada para responder a circunstancias específicas de la vida. Los estudiantes en este nivel pueden utilizar capacidades de investigación bien desarrolladas, vincular el conocimiento adecuadamente y aportar percepciones críticas. Construyen explicaciones basadas en la evidencia y argumentos basados en su análisis crítico. Pueden dar explicaciones basados en evidencias y argumentos que surgen del análisis crítico.

En el nivel 4, los estudiantes trabajan con eficacia en situaciones y problemas que pueden involucrar fenómenos explícitos requeridos para hacer deducciones sobre el papel de la ciencia o tecnología. Seleccionan e integran explicaciones de diferentes disciplinas de ciencia o tecnología y vinculan estas explicaciones directamente con los aspectos de la vida cotidiana. Los estudiantes en este nivel reflexionan sobre sus acciones y comunican sus decisiones utilizando el conocimiento y la evidencia científica.

En el nivel 3, los estudiantes identifican claramente los problemas científicos descritos en diversos contextos. Pueden seleccionar hechos y conocimientos para explicar fenómenos y aplicar modelos sencillos o estrategias de investigación. Los estudiantes en este nivel interpretan y utilizan conceptos de distintas disciplinas y los aplican directamente. Desarrollan breves comunicados refiriendo hechos y toman decisiones basadas en el conocimiento científico.

En el nivel 2, los estudiantes tienen un conocimiento científico adecuado para ofrecer explicaciones posibles en contextos que conocen o sacar conclusiones basadas en investigaciones sencillas. Son capaces de razonar directamente e interpretar literalmente los resultados de una investigación científica o la resolución de un problema tecnológico.

En el nivel 1, los estudiantes tienen un conocimiento científico tan limitado que sólo se puede aplicar a pocas situaciones que conocen. Dan explicaciones científicas obvias y parten de evidencia explícita 

viernes, 21 de octubre de 2011

Porcentajes de estudiantes en los niveles más altos de desempeño en la prueba PISA de ciencias

Resulta evidente la diferencia de desempeños, entre los alumnos latinoamericanos y los de mejor desempeño en la evaluación. Creo que más allá de cualquier cuestionamiento del instrumento aplicado cabe preguntarnos ¿Interesa socialmente los aprendizajes sobre las ciencias? ¿Qué implicaciones puede tener sobre otras áreas? Creo que los cambios deben darse en todos los frentes, en especial el del involucramiento social en los aprendizajes.
A continuación del gráfico, publico la caracterización de los distintos niveles de desempeño alcanzados.


En el nivel 6, los estudiantes identifican, explican y aplican, de manera consistente, el conocimiento científico y el conocimiento sobre la ciencia en una variedad de circunstancias complejas de la vida. Pueden relacionar diferentes fuentes de información y explicaciones, y utilizar la evidencia de estas fuentes para justificar la toma de decisiones. Demuestran clara y consistentemente un pensamiento y razonamiento científicos avanzados, y demuestran la voluntad de utilizar su entendimiento científico a favor de soluciones a problemas científicos y tecnológicos poco comunes para ellos. Los estudiantes en este nivel utilizan el conocimiento científico y desarrollan argumentos a favor de recomendaciones y decisiones para esolver situaciones personales, sociales o globales.

En el nivel 5, los estudiantes identifican los componentes científicos de muchas situaciones complejas de la vida y aplican tanto los conceptos científicos como el conocimiento acerca de la ciencia a dichas situaciones, y pueden comparar, seleccionar y evaluar la evidencia científica adecuada para responder a circunstancias específicas de la vida. Los estudiantes en este nivel pueden utilizar capacidades de investigación bien desarrolladas, vincular el conocimiento adecuadamente y aportar percepciones críticas. Construyen explicaciones basadas en la evidencia y argumentos basados en su análisis crítico. Pueden dar explicaciones basados en evidencias y argumentos que surgen del análisis crítico.

En el nivel 4, los estudiantes trabajan con eficacia en situaciones y problemas que pueden involucrar fenómenos explícitos requeridos para hacer deducciones sobre el papel de la ciencia o tecnología. Seleccionan e integran explicaciones de diferentes disciplinas de ciencia o tecnología y vinculan estas explicaciones directamente con los aspectos de la vida cotidiana. Los estudiantes en este nivel reflexionan sobre sus acciones y comunican sus decisiones utilizando el conocimiento y la evidencia científica.

En el nivel 3, los estudiantes identifican claramente los problemas científicos descritos en diversos contextos. Pueden seleccionar hechos y conocimientos para explicar fenómenos y aplicar modelos sencillos o estrategias de investigación. Los estudiantes en este nivel interpretan y utilizan conceptos de distintas disciplinas y los aplican directamente. Desarrollan breves comunicados refiriendo hechos y toman decisiones asadas en el conocimiento científico.

En el nivel 2, los estudiantes tienen un conocimiento científico adecuado para ofrecer explicaciones posibles en contextos que conocen o sacar conclusiones basadas en investigaciones sencillas. Son capaces de razonar directamente e interpretar literalmente los resultados de una investigación científica o la resolución de un problema tecnológico.

En el nivel 1, los estudiantes tienen un conocimiento científico tan limitado que sólo se puede aplicar a pocas situaciones que conocen. Dan explicaciones científicas obvias y parten de evidencia explícita.

Fuente: Pisa 2006: Science Competencies for Tomorrow’s World.

sábado, 12 de marzo de 2011

Influencia de la Escuela en los aprendizajes

El aprendizaje de los estudiantes puede explicarse por diferentes fenómenos. Por una parte, es obvio que las escuelas juegan un papel central en el aprendizaje de los estudiantes, ya que a ellas se ha asignado esta responsabilidad en las sociedades actuales. Sin embargo, las características socioeconómicas y culturales del contexto de los estudiantes son condiciones de posibilidad para apoyar el aprendizaje. Estudiantes en cuyas familias escasean los recursos económicos, donde los padres alcanzaron pocos años de educación formal, que tienen poco acceso a materiales de lectura y que viven en condiciones de aislamiento geográfico enfrentan un escenario marcadamente distinto a estudiantes con familias donde hay ingresos económicos suficientes, con padres de formación universitaria, con disponibilidad de libros en casa y asentados en una zona urbana de clase media o media alta. Por tales motivos es indispensable indagar cuál es la influencia de la escuela considerando el efecto que tiene este tipo de variables socioeconómicas y culturales. Tal es el propósito de este capítulo.

A lo largo de este capítulo se estudian los efectos escolares en Lectura, Matemática y Ciencias. El efecto escolar se refiere al porcentaje de variabilidad de los resultados que obtienen los estudiantes que se explica por diferencias en el rendimiento entre escuelas. También puede entenderse por efecto escolar aquella parte del total de la variación en los resultados de aprendizaje que se debe a variabilidad entre escuelas. El análisis de los efectos escolares se hace de tres formas distintas. En primer lugar se calculan los efectos escolares brutos, que corresponden al porcentaje de variación de los aprendizajes que corresponde a diferencias de logro entre las escuelas. Aquí no se toman en cuenta las características del contexto de los estudiantes. En segundo lugar se hace un análisis de los efectos escolares que se denominan ajustados. Esto implica que se descuenta el efecto de las variables socioculturales solamente en el nivel del estudiante. En tercer lugar se estiman los efectos escolares netos, que corresponden al efecto escolar después de descontar el peso de las variables socioculturales tanto a nivel de estudiante como el de escuela. La estimación de efectos escolares netos es la más apropiada para ver el potencial que tienen las escuelas para mejorar el aprendizaje, después de tomar en consideración el peso del contexto. El análisis de los tres tipos de efectos escolares se realiza en cada área y grado evaluados para la región y para cada país en lo individual.

Los resultados de este análisis muestran que los efectos escolares brutos oscilan entre 40 y 50%. Esto quiere decir que, hipotéticamente, cerca de la mitad de la variación en el aprendizaje se debe a diferencias entre escuelas. De aquí se deduce que éste podría ser una medida del potencial de la escuela para mejorar el aprendizaje. Sin embargo, al descontar la influencia del contexto sociocultural de los estudiantes y la escuela se obtienen efectos escolares netos menores. Es decir, la potencialidad de las escuelas para promover el aprendizaje se ve limitada por las condiciones de contexto. Por otro lado, los efectos escolares netos son mayores en Matemática y Ciencias en comparación con Lectura. La explicación de esta tendencia podría ser que la escuela es la principal fuente de conocimientos en Matemática y Ciencias, y por ello el contexto sociocultural tiene un menor efecto sobre estas áreas. Contrariamente, las familias pueden ejercer una gran influencia en el desarrollo del lenguaje y apoyo para la Lectura, por lo que en esta área se observa una mayor incidencia de las diferencias entre estudiantes sobre el logro.

Antes de iniciar el capítulo es conveniente indicar que en el análisis de efectos escolares ajustados y netos se utiliza como variable de ajuste el índice de contexto educativo del hogar, para descontar el efecto del contexto en el aprendizaje. Este índice mide el grado en el cual la familia se ha hecho participe de la educación del niño, incluso antes que éste comenzara su etapa escolar. Esto incluye la frecuencia con que la familia realiza actividades que tienen que ver con la educación del estudiante, tanto en el plano de las actividades familiares como en la relación de la familia con la escuela. Esta variable se usa porque es la que ofrece una mejor bondad de ajuste al relacionarla con el aprendizaje. En un par de estimaciones de efectos escolares ajustados y netos se utiliza el índice socioeconómico y cultural, también por mostrar una mejor bondad de
ajuste. Esos casos están debidamente señalados a lo largo del capítulo.

El capítulo se divide en tres grandes apartados. El primero versa sobre los efectos escolares en Lectura, el segundo sobre Matemática y el tercero sobre Ciencias. La parte final del capítulo presenta una sección de conclusiones. Las cifras de efectos escolares y las varianzas por nivel se pueden consultar en el Anexo 1 de este reporte.






Esta es una publicación de la Oficina Regional de
Educación de la UNESCO para América Latina y el
Caribe (OREALC/UNESCO Santiago) y del Laboratorio
Latinoamericano de Evaluación de la Calidad de la
Educación - LLECE
Autoría
Ernesto Treviño*
Héctor Valdés
Mauricio Castro
Roy Costilla
Carlos Pardo
Francisca Donoso Rivas

viernes, 10 de diciembre de 2010

Pisa 2009 Ranking de paises

Se ha publicado los resultados de la Evaluación Pisa, para muchos será un argumento de legitimación de políticas educativas, pero seguramente nos puede dejar reflexiones más profundas.

¿Cuáles son las causas que producen la variación de resultados? ¿Serán por causas didácticas? ¿De organización escolar? ¿Culturales? Toda apreciación basada en una simple tabla será seguramente apresurada, impropia, audaz, pero todo apunta a los valores que asume una sociedad en un momento determinado ¿Qué importancia se le asigna al aprendizaje?

Una sociedad que resalta el consumo, sometida por la televisión y otros mecanismos de dominación, difícilmente logre buenos rendimientos escolares, ya que no los considera valiosos. Espero que podamos acceder a estudios valiosos sobre la temática, que nos ayude a comprender el proceso de distribución de los bienes culturales.

Pisa 2009 Ranking

domingo, 28 de noviembre de 2010

Cómo puede contribuir el proyecto PISA al mejoramiento de la enseñanza de las ciencias

¿Cómo puede contribuir el proyecto PISA a la mejora de la enseñanza de las ciencias (y de otras áreas de conocimiento)?
Daniel Gil Pérez Amparo Vilches
Universidad de Valencia

R e s u m e n:
Se intenta mostrar, en primer lugar, que el proyecto PISA constituye un instrumento potencialmente valioso para la mejora del aprendizaje, la enseñanza y los currículos, que hasta aquí ha sido desaprovechado en nuestro país, dando lugar, incluso, a interpretaciones distorsionadas, perjudiciales para la extensión de una educación de calidad. Se procede a mostrar las virtualidades del proyecto y su coherencia con las aportaciones de la investigación educativa y se indican algunas estrategias para que pueda jugar su papel de instrumento de mejora del proceso de enseñanza/aprendizaje. En particular, se señala la necesidad de superar el escaso conocimiento por parte del profesorado de las orientaciones y fundamentación del proyecto. Ello ha impedido hasta aquí que ejerciera influencia positiva alguna, por lo que se recomienda una amplia campaña informativa y una modificación sustancial de la presentación de los resultados.


Cómo puede contribuir el proyecto PISA al mejoramiento de la enseñanza de las ciencias


(1) Este artículo ha sido concebido como contribución a la Década de la Educación para un futuro sostenible, instituida por Naciones Unidas para el período 2005-2014 (ver http://www.oei.es/decada).

Revista de Educación, extraordinario 2006, pp. 295-31 1.

miércoles, 24 de noviembre de 2010

La evaluación PISA y las actitudes relacionadas con la ciencia y la tecnología

La crisis de la educación científica alcanza a la mayoría de los países desarrollados en el presente, sobre todo en la educación secundaria pero no sólo en ella. Esta crisis es, al menos en parte, consecuencia de una enseñanza que tiende a descuidar los aspectos emotivos y afectivos del ámbito actitudinal. Un efecto indeseable es el descenso de estudiantes en las carreras de ciencia y en las profesiones relacionadas con la ciencia, tanto por la baja elección inicial como por el frecuente abandono de estos estudios. Las actitudes negativas hacia la ciencia y la tecnología, que han podido adquirirse durante toda la escolaridad, están en el origen de este problema y son un aspecto clave del mismo. Como innovación de relieve, la evaluación PISA 2006 (Programme for International Student Assessment) del área de ciencias dedicó una atención especial a diversas actitudes relacionadas con la ciencia, la tecnología y el medio ambiente, dando así cabida a los aspectos afectivos y emotivos, que son un componente básico de la alfabetización científica. Estos aspectos contribuyen a despertar el interés de los estudiantes y a mantener su apoyo a la ciencia, a la vez que los motivan a actuar.


La inclusión de las actitudes y de las áreas seleccionadas para su evaluación en PISA 2006 entronca con la investigación de la evaluación del dominio afectivo en la didáctica de las ciencias, una línea de trabajo que cuenta ya con más de cuatro décadas de tradición y que se ha ido perfeccionando a través del tiempo. Al respecto, es necesario diferenciar entre actitudes hacia la ciencia y actitudes científicas. Las primeras hacen más hincapié en el componente emotivo de las actitudes, mientras que las actitudes científicas se centran más en el componente cognitivo de las actitudes.


PISA 2006 abordó la evaluación de tres dimensiones de las actitudes relacionadas con la ciencia: (i) interés por la ciencia, (ii) apoyo a la investigación científica y (iii) responsabilidad respecto a los recursos y el medio ambiente.

El interés por la ciencia se eligió por su posible relación con el rendimiento en ciencia, la implicación del alumnado en temas sociales relacionados con la ciencia y la tecnología, la elección de estudios y profesiones de ciencia y tecnología, y el aprendizaje de las ciencias durante toda la vida. La relación entre el interés por la ciencia y el rendimiento en ciencias viene siendo investigada desde hace mucho tiempo, pero aún no está claro si existe o no un vínculo causal, o al menos una correlación positiva, entre ambas variables.


El aprecio y apoyo a la investigación científica debería ser uno de los objetivos de la educación científica. Este objetivo implica que se valoren positivamente los diversos métodos para obtener pruebas científicas, el pensamiento creativo y racional, la actitud crítica y la comunicación de conclusiones al encarar situaciones de la vida relacionadas con la ciencia y la tecnología. Entre los diferentes aspectos de esta dimensión que se incluyeron en PISA 2006, destacan la utilización de pruebas científicas para la toma de decisiones y la valoración del papel de la lógica y la racionalidad para establecer conclusiones.


La responsabilidad respecto a los recursos disponibles y el medio ambiente es una preocupación mundial que, al mismo tiempo, tiene gran importancia económica. La UNESCO considera el medio ambiente como una de las tres esferas de la sostenibilidad, junto con la economía y la sociedad y la cultura, las cuales deben figurar en los programas educativos sobre el desarrollo sostenible.




Autor

José Antonio Acevedo Díaz

Inspector de Educación de la Consejería de Educación de la Junta de Andalucía.



 

martes, 16 de noviembre de 2010

Cómo puede contribuir el Proyecto PISA a la mejora de la enseñanza

¿Cómo puede contribuir el proyecto PISA a la mejora de la enseñanza de las ciencias (y de otras áreas de conocimiento)?
Daniel Gil Pérez Amparo Vilches
Universidad de Valencia

R e s u m e n:
Se intenta mostrar, en primer lugar, que el proyecto PISA constituye un instrumento potencialmente valioso para la mejora del aprendizaje, la enseñanza y los currículos, que hasta aquí ha sido desaprovechado en nuestro país, dando lugar, incluso, a interpretaciones distorsionadas, perjudiciales para la extensión de una educación de calidad. Se procede a mostrar las virtualidades del proyecto y su coherencia con las aportaciones de la investigación educativa y se indican algunas estrategias para que pueda jugar su papel de instrumento de mejora del proceso de enseñanza/aprendizaje. En particular, se señala la necesidad de superar el escaso conocimiento por parte del profesorado de las orientaciones y fundamentación del proyecto. Ello ha impedido hasta aquí que ejerciera influencia positiva alguna, por lo que se recomienda una amplia campaña informativa y una modificación sustancial de la presentación de los resultados.

Este artículo ha sido concebido como contribución a la Década de la Educación para un futuro sostenible, instituida por Naciones Unidas para el período 2005-2014 (ver http://www.oei.es/decada).

Cómo puede contribuir el proyecto PISA al mejoramiento de la enseñanza de las ciencias


PISA: UN PROYECTO CONCEBIDO COMO INSTRUMENTO DE MEJORA DE LA ENSEÑANZA Conviene comenzar señalando que el proyecto PISA no constituye un simple instrumento de constatación, sino que ha sido concebido explícitamente para contribuir a la mejora de la enseñanza, con orientaciones que se apoyan en los resultados convergentes de la investigación educativa de las últimas décadas. Así, para el caso particular de las ciencias, los documentos del proyecto señalan:
El programa PISA considera que la formación científica es un objetivo clave de la educación y debe lograrse durante el periodo obligatorio de enseñanza, independientemente de que el alumnado continúe sus estudios científicos o no lo haga ya que la preparación básica en ciencias se relaciona con la capacidad de pensar en un mundo en el que la ciencia y la tecnología influyen en nuestras vidas. Considera, por tanto, que la formación básica en ciencias es una competencia general necesaria en la vida actual.

Y se precisa seguidamente que la aptitud para las ciencias se define en PISA como:
La capacidad para emplear el conocimiento científico para identificar preguntas y obtener conclusiones basadas en pruebas, con el fin de comprender y poder tomar decisiones sobre el mundo natural y sobre los cambios que la actividad humana produce en él (http://www.ince.mec.es/pub/index.htm, programa PISA. Ítems de ciencias).

De acuerdo con ello, el proyecto PISA evalúa el conocimiento científico a través de tres grandes dimensiones, superando –lo que constituye un primer e importante mérito– el habitual reduccionismo conceptual de las actividades de evaluación (Alonso, Gil Pérez y Martínez Torregrosa, 1992; Tamir, 1998; Goñi, 2005): Los procesos o destrezas científicas Los conceptos y contenidos científicos El contexto en el que se aplica el conocimiento científico Transcribiremos brevemente cómo se conciben estas tres dimensiones en el proyecto, lo que permite comprender la orientación del mismo.

PROCESOS O DESTREZAS CIENTÍFICAS
El proyecto PISA identifica cinco procesos científicos y señala, como elemento fundamental, que la evaluación de cada uno de ellos ayuda a entender hasta qué punto la educación científica prepara a los futuros ciudadanos y ciudadanas para tomar decisiones sobre los cambios que la actividad humana produce en el mundo natural. Dichos procesos son:
Reconocer cuestiones científicamente investigables: Este proceso implica identificar los tipos de preguntas que la ciencia intenta responder, o bien reconocer una cuestión que es o puede ser comprobada en una determinada situación.
Identificar las evidencias necesarias en una investigación científica: Conlleva la identificación de las evidencias que son necesarias para contestar a los interrogantes que pueden plantearse en una investigación científica. Asimismo, implica identificar o definir los procedimientos necesarios para la recogida de datos.
Extraer o evaluar conclusiones: Este proceso implica relacionar las conclusiones con la evidencia en la que se basan o deberían basarse. Por ejemplo, presentar a los estudiantes el informe de una investigación dada para que deduzcan una o varias conclusiones alternativas. : Comunicar conclusiones válidas: Este proceso valora si la expresión de las conclusiones que se deducen a partir de una evidencia es apropiada a una audiencia determinada. Lo que se valora en este procedimiento es la claridad de la comunicación más que la conclusión.
Demostrar la comprensión de conceptos científicos: Se trata de demostrar si existe comprensión necesaria para utilizar los conceptos en situaciones distintas en las que se aprendieron. Esto supone no sólo recordar el conocimiento, sino también saber exponer la importancia del mismo o usarlo para hacer predicciones o dar explicaciones.
Otro aspecto que conviene resaltar es que, como se indica en el proyecto, estos procesos científicos se organizan en tres grupos de competencias según el tipo de capacidad de pensamiento predominante que se requiere para resolver las preguntas que se presentan: Descripción, explicación y predicción de fenómenos científicos
Comprensión de la investigación científica
Interpretación de evidencias y conclusiones científicas

CONCEPTOS Y CONTENIDOS Por lo que se refiere a este apartado, se señala que el programa PISA no pretende identificar todos los conceptos que podrían estar asociados a los grandes temas científicos para ser objeto de evaluación. En lugar de ello, indican, PISA define una serie de temas principales de la ciencia y a partir de ellos se hace un muestreo seleccionando los contenidos que se deben incluir según cuatro criterios de relevancia:
Que aparezcan en situaciones cotidianas y tengan un alto grado de utilidad en la vida diaria
Que se relacionen con aspectos relevantes de la ciencia, seleccionando aquéllos que con más probabilidad mantengan su importancia científica en el futuro
Que sean aptos y relevantes para detectar la formación científica del alumnado
Que sean aptos para utilizarlos en procesos científicos y no sólo que correspondan a definiciones o clasificaciones que únicamente deben ser recordadas
Para terminar este apartado, se indica que, basándose en estos criterios, 2003 selecciona conceptos pertenecientes a los siguientes 13 grandes temas científicos, que corresponden a un amplio abanico de disciplinas (física, biología, química, medicina, etc.):
Estructura y propiedades de la materia; cambio atmosférico; cambios físicos y químicos; transformaciones de la energía; fuerzas y movimiento; función y forma; cambio fisiológico; biodiversidad; control genético; ecosistemas; la Tierra y su lugar en el universo, cambio geológico.

PISA CONTEXTOS CIENTÍFICOS
Conviene destacar la importancia de esta última dimensión del proyecto, tan a menudo ausente en las evaluaciones, pero esencial para que la educación científica contribuya a formar ciudadanas y ciudadanos preparados para participar en las necesarias tomas de decisiones frente a la actual situación de emergencia planetaria (Comisión Mundial del Medio Ambiente y del Desarrollo, 1988; Tilbury, 1995; Vilches y Gil, 2003). El proyecto se refiere aquí a las situaciones y áreas en las que el alumnado tiene que aplicar sus conocimientos científicos, resaltando los contextos donde se aplican y dando prioridad a los que se relacionan con problemas y temas que tienen repercusión en el bienestar humano y precisan la toma de decisiones. Los espacios de aplicación de las ciencias en el proyecto aparecen agrupados en tres grandes áreas: Las ciencias de la vida y la salud
Las ciencias de la Tierra y del medio ambiente
Las ciencias y el desarrollo tecnocientífico. Atendiendo a todo lo que acabamos de resaltar, como elementos básicos de la forma en que el proyecto evalúa el conocimiento científico, podemos afirmar que el tener en cuenta estas tres dimensiones favorece la inmersión en la cultura científica, saliendo al paso de visiones deformadas y empobrecidas de la ciencia y la tecnología (McComas, 1998; Gil Pérez et al., 2005). En el Anexo I, hemos incluido un ejemplo de las preguntas utilizadas en el proyecto PISA, que permite constatar de qué forma se intenta atender a las orientaciones expuestas. Más ejemplos pueden encontrarse en http://www.ince.mec.es/ pub/index.htm. Una idea central del proyecto PISA es que con el enfoque de la evaluación propuesta –que considera la aplicación del conocimiento científico en vez de la memorización de conceptos– se puede favorecer el desarrollo de una didáctica coherente con los logros que se pretenden conseguir (saber resolver problemas que se plantean en la vida real: situaciones de viaje, compra, domésticas, económicas, etc.) y, en última instancia, mejorar el rendimiento de los estudiantes.
Conviene resaltar que esta estrecha relación entre innovación educativa y evaluación, como aparece en el proyecto, ha sido reiteradamente puesta de relieve por la investigación (Tamir, 1998; Gil Pérez y Martínez Torregrosa, 2005). Muy en particular, los investigadores han llamado la atención sobre la necesidad de acompañar las innovaciones curriculares de transformaciones similares en la evaluación, para contribuir a consolidar el necesario cambio de modelo didáctico (Linn, 1987). Porque, desde luego, poco importan las innovaciones introducidas o los objetivos que se hayan marcado: si la evaluación sigue consistiendo en ejercicios para constatar el grado de retención de algunos conocimientos conceptuales, éste será para los alumnos y alumnas (y gran parte del profesorado) el verdadero objetivo del aprendizaje. Como señala Acevedo (2005), las evaluaciones externas, bien planteadas, pueden servir de acicate para orientar la enseñanza de las ciencias hacia las innovaciones de los currículos reformados en consonancia con las aportaciones de la investigación en didáctica de las ciencias.
El propósito del proyecto PISA es, precisamente, influir en la enseñanza a través de un replanteamiento de la evaluación, favoreciendo al propio tiempo una reflexión sobre los problemas de la educación en una escala internacional y el intercambio de planteamientos, rompiendo el aislamiento de sistemas educativos estancos e impulsando de ese modo las nuevas propuestas didácticas. Un proyecto como el PISA se revela, pues, como un instrumento de gran potencialidad para contribuir a la necesaria renovación de la enseñanza de las ciencias y otras áreas de conocimiento. Ahora bien, ¿hasta qué punto el proyecto PISA está cumpliendo esta función? Como intentaremos mostrar justificadamente en el siguiente apartado, hasta aquí y por lo que se refiere a nuestro país, dicho proyecto no ha jugado el papel para el que ha sido concebido y debe llegar a desempeñar.

UN INSTRUMENTO, HASTA EL MOMENTO DESAPROVECHADO, DE MEJORA DE LA ENSEÑANZA
Una primera condición para que un sistema de evaluación influya sobre la enseñanza es que sea conocido por el profesorado. Es lo que ocurre, por ejemplo, con las Pruebas de Acceso a la Universidad, que se hacen públicas año tras año y que, en la mayor parte de los casos, con su reduccionismo conceptual están contribuyendo con enorme eficacia a condicionar las innovaciones curriculares hasta llegar a reprimirlas (Oliva y Acevedo, 2005). Cabe, pues, preguntarse si el profesorado del nivel al que se aplican las pruebas diseñadas por el proyecto PISA conoce las orientaciones del proyecto, las características de las pruebas, lo que se pretende medir con ellas, etc. Un amplio estudio de campo consistente en entrevistar a profesores de ciencias de más de dos docenas de centros de la Comunidad Valenciana, y de otros tantos de otras comunidades (Andalucía, Asturias, Canarias, Cataluña, Extremadura, Madrid y País Vasco), nos ha permitido constatar el prácticamente nulo conocimiento, por parte del profesorado, de los contenidos y las orientaciones de las pruebas utilizadas por el proyecto PISA. Ello resulta lógico porque, como señalan los entrevistados, ni ha llegado información oficial a los centros, ni se les ha impulsado a acceder a las páginas web que incluyen ejemplos de las pruebas y su fundamentación (que desconocían).
Tampoco los medios de comunicación, que se han hecho amplio eco de «los resultados» de dichas pruebas, han contribuido a dar a conocer su contenido y orientaciones. Y lo mismo puede decirse de la generalidad de los artículos de las revistas especializadas que, con raras y recientes excepciones (Acevedo, 2005; Goñi, 2005), se han ocupado, en general, de discutir los informes (centrados en el análisis estadístico de los resultados). En consecuencia, cabe concluir que se está desaprovechando el papel orientador que las evaluaciones trienales realizadas y proyectadas –la próxima para el año 2006, con una especial atención a los conocimientos científicos– pudieran y debieran tener.
Peor aún, podemos hablar de desorientación provocada por los informes publicados y, muy en particular, por la notable y posiblemente bien intencionada atención que los medios de comunicación han prestado a la publicación de los informes PISA. En efecto, cuando en diciembre de 2004 se dio a conocer el último informe

PISA, los titulares y editoriales de prensa adquirieron, al igual que tres años antes, tintes dramáticos: «Los alumnos españoles, a la cola de la OCDE en matemáticas, ciencia y lectura», «el informe PISA 2003, ha hecho saltar la alarma sobre los malos resultados obtenidos por el sistema español...» Pero no sólo los media expresaban su alarma. Personalidades académicas, responsables de organismos, instituciones educativas, de asociaciones del profesorado e incluso investigadores en el campo de la educación, insistían en ello. Así, en un número monográfico dedicado por la revista Aula al informe PISA 2003, Álvaro Marchesi se preguntaba: «¿Por qué nuestros alumnos obtienen peores resultados que los de la mayoría de los países de nuestro entorno?» (Marchesi, 2005, p. 9). Isabel Solé Gallart (2005, p. 22) precisaba que, en lo que se refiere a la lectura, «la puntuación media –481 puntos– de los alumnos españoles (...) es significativamente inferior al promedio OCDE –494 puntos– (la cursiva es nuestra)». Y Antonio de Pro Bueno (2005, p. 32) incluye una tabla comparativa, según la cual los resultados de los estudiantes españoles en ciencias serían «muy inferiores» a los de los siguientes países de la Unión Europea: Finlandia, Reino Unido, Austria, Irlanda, Suecia y República Checa; inferiores a los de Francia y Hungría; similares a los de Bélgica, Alemania y Polonia y, finalmente, superiores a los de Dinamarca, Italia, Grecia, Letonia, Portugal y Luxemburgo.
Los resultados del actual informe –escribíamos en el mismo monográfico (Gil Pérez y Vilches, 2005, p. 16)– no parecen dejar lugar a dudas, puesto que colocan a España en el lugar 22 (entre 30) por lo que se refiere a cultura científica, el 23 en comprensión lectora y el 24 en cultura matemática, apareciendo por debajo de la media en los tres dominios analizados. Quizás ello justifique la rapidez con la que los editoriales de los periódicos, los representantes políticos y los expertos en educación se han pronunciado para, en general, deplorar la situación y denunciar un sistema educativo «que hace agua». Estamos de acuerdo, sin embargo, con Jesús María Goñi (2005, p. 28) cuando escribe:
Acostumbrados, como estamos, al ruido de los medios de comunicación, no echamos de menos el silencio ni la reflexión reposada que debería acompañar a cualquier intento responsable de leer el significado de estos datos.

Para ayudar a esa reflexión reposada y evitar la obnubilación que producen las apariencias, propusimos el siguiente ejercicio mental, a partir de una situación bastante común:
Supongamos que en un centro educativo se comparan las notas medias de matemáticas obtenidas en tres grupos-clase distintos y que dichas nota son, respectivamente, 4.9, 5.0 y 5.5. ¿Cuál sería nuestra valoración de dichos resultados? ¿Lamentaríamos escandalizados los resultados obtenidos en el primer grupo, por quedar detrás de los otros dos? Seguro que no, claro está; nadie con una mínima sensatez diría que dichas notas medias son significativamente distintas. Nadie alabaría la brillantez del tercer grupo ni se escandalizaría por los mediocres resultados del primero (los tres recibirían un simple aprobado). Sin embargo eso es exactamente lo que estamos haciendo al interpretar los datos ofrecidos por el informe PISA.

En efecto, por lo que se refiere, por ejemplo, a la cultura científica, España obtiene 487 puntos y queda por debajo de la media (500), mientras los países mejor clasificados son Japón y Finlandia con 548 puntos. Unas sencillas proporciones nos permiten calcular que, si asignamos a la media de la OCDE una clasificación de 5, a España le corresponde un 4.9 y a Finlandia o Japón, un 5.5. Igualmente pequeñas son las diferencias en comprensión de la escritura y en matemáticas: también en estos casos España obtiene una nota de 4.9 con relación al 5 correspondiente a la media. Nada justifica, pues, el alarmismo con que han sido valorados los resultados del informe PISA. Dicho informe no muestra otra cosa que una homogeneidad de resultados en el conjunto de los países de la OCDE… y la necesidad de mejoras en todos ellos. Merece la pena reflexionar sobre la forma en que se proporcionan dichos resultados «secuela, sin duda –comenta con acierto de Pro (2005, p. 32)– del arraigo que tienen las aficiones deportivas en nuestro contexto». Si presentamos un listado ordenado según la puntuación obtenida por cada país, es obvio que siempre habrá países por arriba y por debajo de la media. Y, si nos fijamos primordialmente en el orden, países con resultados prácticamente idénticos recibirán alabanzas o críticas. El propio Ministerio de Educación y Ciencia da pie a dicha lectura en sus documentos «Evaluación PISA 2003. Resumen de los primeros resultados en España» y «Aprender para el mundo de mañana. Resumen de resultados PISA 2003» (http://www.ince.mec.es/pub/index.htm). Pero, ¿aceptaríamos que se hiciera lo mismo con la valoración del trabajo de cada alumno y se enviara a sus padres un boletín de notas en el que se indicara, por ejemplo, que el alumno ha obtenido un pobre resultado porque ocupa el lugar 23 (de 30), aunque su nota no difiriera de la de quien ocupa el primer lugar más que en alguna décima? Eso es lo que ocurre con el informe PISA y conduce a que los resultados de Finlandia sean ofrecidos como modelo y los de España como expresión de «grave deterioro» de la educación secundaria… aunque apenas difieran entre sí.
Es preciso cuestionar este tipo de presentación que distorsiona los resultados y responde a una absurda idea de competitividad que no pone el acento en lo esencial, que son los logros que se deben alcanzar y la necesidad de poner los medios para ello. Debemos insistir en que, en contra de las interpretaciones distorsionadas que se están realizando, la aplicación de la reforma LOGSE no se ha traducido en peores resultados sino que ha mantenido el nivel medio, pese a la incorporación de nuevos sectores de población derivada de la ampliación de la escolarización obligatoria. «Por lo tanto –con palabras de Jesús. M. Goñi (2005, p. 29)–, si lo que pretenden algunos es servirse de los resultados de PISA para atacar las posturas innovadoras en el sistema educativo español, conviene decirles que cuanto más critiquen esas reformas y más caso se haga a sus críticas, peores resultados obtendremos en este proyecto de evaluación internacional». No son, pues, las lecturas «deportivas» de las clasificaciones que muestran los informes PISA las que pueden ayudarnos a mejorar el sistema educativo. Otro tipo de análisis y otro tipo de medidas pueden y deben ayudarnos a aprovechar las potencialidades transformadoras del proyecto PISA.

¿CÓMO APROVECHAR LAS POTENCIALIDADES DEL PROYECTO PISA?
Una primera medida que se debería adoptar con urgencia, si nuestras autoridades académicas conceden importancia a los informes del proyecto PISA y están preocupadas por los resultados que muestran, habría de ser proceder a dar la máxima difusión a las orientaciones y fundamentación del proyecto, proporcionando suficientes ejemplos para ayudar a reorientar la enseñanza en la dirección que éste marca. Una orientación que viene apoyada por una amplia investigación educativa y responde a los planteamientos de las reformas curriculares que están produciéndose en los países de la UE, incluido el nuestro.
Precisamente, esta coherencia básica entre la orientación del proyecto PISA y las propuestas curriculares de la LOGSE y del actual proyecto de LOE convierte al proyecto en un instrumento privilegiado para hacer avanzar dichas reformas. Pero para ello debería procederse a una petición explícita y fundamentada a los departamentos de los centros, para que analizaran cuidadosamente los materiales del proyecto y consideraran la conveniencia de utilizarlos como instrumento de evaluación y de enseñanza. En segundo lugar, sería necesario presentar los resultados de una forma absolutamente diferente a como se viene haciendo. Lo que importa no es si las medias obtenidas por los estudiantes de un país están unas centésimas por debajo o por arriba de los de otro. Es preciso denunciar el uso de este tipo de clasificación para atribuir calificaciones de excelencia y fracaso a resultados que apenas difieren entre sí. Lo que realmente interesa es conocer en qué medida los estudiantes alcanzan los logros deseados, cuáles son las deficiencias y los obstáculos detectados, y utilizar dicha información para reorientar la acción educativa con vistas a mejorar el aprendizaje, la enseñanza y el propio currículo (Tamir, 1998)... sin olvidar la mejora de las pruebas de evaluación utilizadas. Esto último es de la mayor importancia: las propuestas del proyecto PISA no deben considerarse como algo intocable y deben someterse al escrutinio de su coherencia con los resultados de la investigación educativa y, por tanto, a su reorientación, si fuera necesario, para que contribuyan al logro de los objetivos planteados. Para el caso de educación científica, en particular, queremos señalar que, en coherencia con los resultados de la investigación en didáctica de las ciencias, es preciso enriquecer aún más el contenido de las pruebas (Gil Pérez y Martínez Torregrosa, 2005) de forma que contribuyan a proporcionar una imagen de la ciencia como actividad abierta y creativa, socialmente contextualizada, capaz de salir al paso de las actitudes de desinterés y rechazo que una enseñanza marcada por un reduccionismo conceptual y operativista está, lamentablemente, generando.
Algo absolutamente necesario para contribuir a la formación de ciudadanas y ciudadanos capaces de participar, con espíritu crítico, en la toma de decisiones acerca de los problemas relacionados con el desarrollo tecnocientífico y de sentir la emoción de los apasionantes desafíos a los que se ha enfrentado y sigue enfrentándose la comunidad científica (Bybee, 1997; Gil Pérez y Vilches, 2004). La cuidadosa consideración de aquello que debe ser evaluado resulta esencial, insistimos, para evitar reduccionismos empobrecedores y ha de enfrentarse a tradiciones que sistemáticamente han limitado la evaluación a los aspectos más fáciles de medir. La toma en consideración de la naturaleza de la actividad científica y tecnológica (McComas, 1998; Gil Pérez et al., 2005), así como el desarrollo del modelo de aprendizaje como investigación orientada, fruto convergente de numerosas investigaciones (Gabel, 1994; Fraser y Tobin, 1998), permite romper con dichas tradiciones e incluir toda una pluralidad de aspectos como los que recogemos en el Cuadro I, planteado como una red para el análisis del contenido de las pruebas de evaluación. Si analizamos con dicha red los ejemplos de pruebas del proyecto PISA dados a conocer, así como sus presupuestos teóricos, encontraremos una aceptable similitud entre ambas propuestas, aunque es preciso llamar la atención acerca de olvidos fundamentales como es el de la emisión de hipótesis, que encontramos escasamente presente en lo que se ha hecho público del proyecto PISA. Lo esencial, en todo caso, es mantener una permanente actitud de investigación para analizar las propuestas y sus resultados y proceder a las necesarias rectificaciones y mejoras.

CUADRO I
Análisis de la presencia de actividades de evaluación coherentes con las estrategias de construcción de conocimientos científicos
1 . ¿Se incluyen situaciones problemáticas abiertas que permitan a los estudiantes formular preguntas, plantear problemas?
2 . ¿Se piden comentarios sobre el posible interés de las situaciones propuestas (considerando las posibles implicaciones CTSA, la toma de decisiones, la relación con el resto del programa, etc.)?
3 . ¿Se piden análisis cualitativos, significativos, que eviten el mero operativismo y ayuden a comprender y acotar las situaciones planteadas?
4 . ¿Se pide la emisión de hipótesis, fundamentadas en los conocimientos disponibles, susceptibles de orientar el tratamiento de las situaciones y de hacer explícitas, funcionalmente, las preconcepciones? ¿Se plantea, al menos, el manejo o el análisis crítico de alguna hipótesis? ¿Se incluyen actividades que supongan atención a las preconcepciones (contempladas como hipótesis)?
5 . ¿Se plantea la elaboración de estrategias (en plural), incluyendo, en su caso, diseños experimentales? ¿Se pide, al menos, la evaluación crítica de algún diseño? ¿Se presta atención a la actividad práctica en sí misma (montajes, medidas...) dándole a la dimensión tecnológica el papel que le corresponde en este proceso? ¿Se presta atención, en particular, al manejo de la tecnología actual (ordenadores, electrónica, automatización...) con objeto de favorecer una visión más correcta de la actividad científico-técnica contemporánea?
6 . ¿Se piden análisis detenidos de los resultados (su interpretación física, fiabilidad, etc.), a la luz del cuerpo de conocimientos disponible, de las hipótesis manejadas y/o de otros resultados? ¿Se pide, en particular, el análisis de los posibles conflictos cognitivos entre algunos resultados y las concepciones iniciales? ¿Se favorece la «autorregulación» del trabajo de los alumnos (proporcionando, por ejemplo, indicadores que les permitan comprobar si van o no en una dirección correcta? ¿Se incluyen actividades para que los estudiantes cotejen su evolución conceptual y metodológica con la experimentada históricamente por la comunidad científica?
Análisis de la presencia de actividades de evaluación coherentes con las estrategias de construcción de conocimientos científicos
7 . ¿Se piden esfuerzos de integración que consideren la contribución de los estudios realizados a la construcción de un cuerpo coherente de conocimientos (al afianzamiento o reforzamiento del mismo, a la superación de supuestas barreras...), las posibles implicaciones en otros campos de conocimientos, etc.? ¿Se pide algún trabajo de construcción de síntesis, mapas conceptuales, etc., que ponga en relación conocimientos diversos?
8 . ¿Se pide la consideración de posibles perspectivas (replanteamiento del estudio a otro nivel de complejidad, problemas derivados...)? ¿Se incluyen, en particular, actividades relativas a las implicaciones CTSA del estudio realizado (posibles aplicaciones, transformaciones sociales, repercusiones negativas...), a la toma de decisiones, en particular, frente a los graves problemas que afectan a la humanidad y la necesidad de contribuir a un futuro sostenible, saliendo al paso de la concepción que reduce la tecnología a mera aplicación de la ciencia? ¿Se incorporan actividades que presten atención a la educación no formal (museos, prensa...)? ¿Se valoran los «productos» elaborados por los estudiantes (prototipos, colecciones de objetos, carteles...) expresión de las estrechas relaciones ciencia-tecnología?
9 . ¿Se presta atención a la comunicación como aspecto esencial de la actividad científica? ¿Se plantea la elaboración de memorias científicas del trabajo realizado? ¿Se pide la lectura y comentario crítico de textos científicos? ¿Se pone en contacto a los estudiantes con la historia de la ciencia? ¿Se presta atención a la verbalización, solicitando comentarios significativos que eviten el «operativismo mudo»? ¿Se hace un seguimiento cuidadoso del dossier de los alumnos como memoria ordenada del trabajo realizado?
10. ¿Se potencia en la evaluación la dimensión colectiva del trabajo científico valorando los trabajos realizados en equipo, prestando atención al funcionamiento de los grupos de trabajo, etc.? ¿Se favorece la interregulación de los equipos? ¿Se permite (y potencia) el manejo funcional del cuerpo de conocimientos aceptado por la comunidad científica (sin exigir memorizaciones irracionales)? ¿Se presta atención, en ese sentido, a que los prerrequisitos no se conviertan en obstáculo para las tareas propuestas?
Queremos terminar recordando las palabras de Marchesi (2005, p. 12):
« No es fácil ni inmediato obtener mejores resultados, ni se logra una mayor calidad del sistema educativo con sólo aprobar una buena ley, elaborar un programa atractivo o incrementar los presupuestos. El cambio educativo exige tiempo, un proyecto amplio, coherente y equilibrado, una voluntad decidida y el compro» miso de la mayoría de la comunidad educativa y del conjunto de la sociedad»

No hay, obviamente, soluciones milagro, pero el proyecto PISA puede contribuir a la mejora de la educación... si hacemos un uso adecuado del mismo. Algo a lo que deberíamos comprometernos.

sábado, 9 de octubre de 2010

Resultados evaluación TIMSS 2007

RESULTADOS EN EL ESTUDIO TIMSS 2007 Association for the Evaluation of Educational Achievement (IEA) Diciembre 2008
Slide 2
¿Qué es el TIMSS? El Estudio Internacional de Tendencias en Matemáticas y Ciencias es el estudio de rendimiento académico más amplio e importante realizado en el mundo actualmente. El TIMSS 2007 es el cuarto ciclo de un conjunto de mediciones continuas que se practican cada cuatro años. Es organizado y coordinado por la International Association for the Evaluation of Educational Achievement (IEA) para evaluar el desempeño de los estudiantes en el mundo e indagar sobre sus factores contextuales. .
Slide 3
Alcance del TIMSS PROPÓSITO: evaluar periódicamente el desempeño académico de los estudiantes del mundo en las áreas de Matemáticas y Ciencias explicando también los contextos de aprendizaje. Áreas y grados evaluados: Matemática (4º y 8º) Ciencias (4º y 8º) La evaluación del desempeño en Lectura es parte de otro estudio dirigido por la IEA llamado PIRLS.






Slide 4
¿Quiénes participaron en TIMSS 2007? . Participantes: Participaron 59 países y 8 entidades subnacionales: 37 países participaron en 4º 50 países participaron en 8º 33 países participaron en ambos grados
Slide 5
¿Quiénes participaron…? .
Slide 6
¿Cuál es el número de escuelas y estudiantes incluidos en el TIMSS?
Slide 7
Fases de realización del TIMSS (2004 – 2008)
Slide 8
La participación requiere que un país cuente con la capacidad técnica y logística para implementar el estudio. Definición de contenidos curriculares a evaluar tomando en cuenta que sean comunes a todos los países. Los responsables internacionales del programa determinan y seleccionan las muestras de cada país. Validación técnica de los ítems Elaboración de las pruebas con participación de técnicos nacionales. Diseño y verificación externa de normas precisas de aplicación de la prueba. Replicación del procesamiento para la estimación de las puntuaciones de los estudiantes por una agencia externa. El Salvador cumplió con todos los estándares técnicos y operativos por eso sus resultados aparecen en los cuadros principales y sin asteriscos Control de calidad del TIMSS
Slide 9
Qué se evaluó en Matemáticas por grado
Slide 10
Qué se evaluó en Ciencias por grado
Slide 11
Número y Tipos de Preguntas Utilizados en las Pruebas por Grado y Materia
Slide 12
Compatibilidad entre los tópicos de las pruebas y el currículo enseñado
Slide 13
Resultados
Slide 14
La Posición Mundial de El Salvador en Matemáticas de 4º Grado
Slide 15
La Posición Mundial de El Salvador en Matemáticas de 8º Grado
Slide 16
En qué nivel se ubican los Estudiantes Salvadoreños en Matemáticas de 4° Grado
Slide 17
En qué nivel se ubican los Estudiantes Salvadoreños en Matemáticas de 8° Grado
Slide 18
La Posición Mundial de El Salvador en Ciencias de 4º Grado
Slide 19
La Posición Mundial de El Salvador en Ciencias de 8º Grado
Slide 20
En qué nivel se ubican los Estudiantes Salvadoreños en Ciencias de 4° Grado
Slide 21
En qué nivel se ubican los Estudiantes Salvadoreños en Ciencias de 8° Grado
Slide 22
Promedio de Rendimiento por dominio de contenido Matemática 8° Grado
Slide 23
Promedio de rendimiento por dominio cognitivo en Matemática 8° Grado
Slide 24
Promedio de rendimiento por dominio de contenido en Ciencias de 4° Grado
Slide 25
Desigualdad de género en matemáticas
Slide 26
Desigualdad de género en Ciencias
Slide 27
Factores asociados al desempeño de los alumnos según el TIMSS Nivel educativo de los padres Utilización de computadoras en casa Clima escolar Actitud positiva de alumnos y maestros Nivel socioeconómico y cultural del estudiante Infraestructura y servicios básicos en la escuela Disponibilidad de bibliotecas escolares Formación docente Satisfacción docente Zona urbana o rural Sector público o privado Tecnología disponible para el alumno Curriculum
Slide 28
Puntajes obtenidos en relación a lo esperado en Mat. De 8° Grado dado el IDH
Slide 29
Puntajes obtenidos en relación a lo esperado en Mat. De 4° Y el IDH
Slide 30
Puntajes obtenidos en relación a lo esperado en Ciencia de 4° Y el IDH
Slide 31
Puntajes obtenidos en relación a lo esperado en Ciencia de 8° Y el IDH
Slide 32
Condiciones de trabajo según los docentes de ciencias de 8°
Slide 33
Factores relacionados con las condiciones de los hogares
Slide 34
Diferencia en los promedios de rendimiento entre escuelas con niños ricos y pobres
Slide 35
Puntaje promedio por confianza en aprender ciencias
Slide 36
Puntaje promedio por confianza en aprender Matemáticas
Slide 37
Estudiantes con maestros que sienten muy bien preparados
Slide 38
Factores relacionados con actividad escolar
Slide 39
Características de los profesores de ciencias de 8°
Slide 40
Características de los profesores de Matemáticas
Slide 41
Profesores que se sienten bien preparados para enseñar Matemáticas
Slide 42
Nivel educativo de los padres de familia
Slide 43
CONCLUSIONES Y HALLAZGOS La importante es la participación no el lugar que se ocupó. El Salvador es el primer país centroamericano que participa en un estudio de esta importancia. Los resultados más altos en el estudio lo ocuparon los países asiáticos y ningún país que no fuera de Asia o Europa llega al promedio internacional. Pero en todos los países todavía existen problemas de calidad educativa. La posición ocupada por El Salvador es similar a la ocupada por Colombia y por otros países latinoamericanos que han participado en ciclos anteriores. El Salvador ocupó un lugar de acuerdo con su desarrollo humano Los resultados confirman y refuerzan los datos provenientes de pruebas nacionales El estudio señala los factores que más inciden en un alto aprendizaje Se gana comparabilidad con los países desarrollados Se fortaleció la capacidad nacional para evaluar y monitorear Cómo se puede vincular esto con el plan 2021 y las acciones a seguir
Slide 44
CONCLUSIONES Y ACCIONES A SEGUIR La mejor posición la ocupó El Salvador en Ciencias de 4° grado y la más baja en matemáticas de octavo. Aunque los estudiantes salvadoreños se ubican en lugares bajos de desempeño, hay algunos que logran niveles de suficiencia e incluso responder mejor preguntas particulares que estudiantes de otros países desarrollados. Los resultados prueban que la calidad es el reto más importante que enfrenta el sistema educativo. Los datos pueden servir como base de datos para seguir monitoreando el progreso educativo del país en los próximos años

sábado, 13 de febrero de 2010

Manual Maestros PISA

¿Qué es PISA?
Lo que evalúa y lo que no evalúa PISA
PISA Lectura
¿Qué mide?
Niveles de desempeño en competencia lectora
PISA Matemática. La competencia matemática. Procesos que el estudiante debe llevar a cabo.
PISA Ciencias. La competencia científica, procesos implicados.
Importancia de involucrar a los padres y a la comunidad
Formato de la prueba PISA
De que se trata, cómo se contesta y cómo evalúa PISA lectura.
Cómo se evalúa y cómo se contesta PISA matemática y PISA ciencias.
Ejercicios tipo de la prueba de lectura, matemática y ciencias.

Manual Maestros PISA

sábado, 18 de abril de 2009

APORTES PARA LA ENSEÑANZA A PARTIR DEL SERCE

Luego de la presentación de los resultados generales del Segundo Estudio Regional Comparativo y Explicativo (SERCE), que involucró a escolares de 3° y 6° de Primaria en 16 países de la región, en junio de 2008, la UNESCO ha presentado un segundo conjunto de publicaciones, cuyo foco de atención está puesto en las aspectos didácticos y cuyos destinatarios son los maestros de la región.

Esta colección, compuesta por tres textos, uno sobre Lectura, otro sobre Matemática y otro sobre Ciencias Naturales, tiene como objetivo “proporcionar a los docentes orientaciones que los ayuden a mejorar sus prácticas pedagógicas en las áreas exploradas por el SERCE de modo de lograr que los estudiantes construyan los aprendizajes necesarios para participar plenamente en la sociedad”.

Con la publicación de estos trabajos, el Laboratorio Latinoamericano de Evaluación de la Calidad de la Educación se propone llegar a los maestros con un tipo de reporte diferente de los clásicos en este tipo de estudios, que suelen ofrecer un enfoque exclusivamente estadístico. Con estas publicaciones se ha hecho un importante esfuerzo por llegar a los docentes con un material que hable sobre la enseñanza y sus desafíos.

La estructura general que, con algunas diferencias, sigue cada una de las publicaciones es la siguiente:
a. una descripción general del estudio y del marco conceptual desde el cual fueron construidas las pruebas aplicadas;
b. un análisis de los desempeños alcanzados por los escolares y de las principales insuficiencias que los resultados ponen de manifiesto, ilustrados con ejemplos de las respuestas dadas por los estudiantes a preguntas seleccionadas;
c. una propuesta de carácter conceptual acerca del enfoque para la enseñanza de cada una de estas disciplinas;
d. un conjunto de propuestas y sugerencias didácticas para el trabajo docente en el aula.

Aportes para la enseñanza de la Lectura. Ana Atorresi con la colaboración de Ivanna
Centanino, Rodrigo Bengochea, Fabio Jurado, Ricardo Martínez y Carlos Pardo.
UNESCO/OREALC, Santiago de Chile, 2009.
Aportes para la enseñanza de la Matemática. Liliana Bronzina, Graciela Chemello y Mónica Agrasar. UNESCO/OREALC, Santiago de Chile, 2009.
Aportes para la enseñanza de las Ciencias Naturales. Julia Leymonié con la colaboración de Olga Bernadou, María Dibarboure, Edith Santos e Ignacia Toro. UNESCO/OREALC, Santiago de Chile, 2009.

La dirección en la que las publicaciones están disponibles para ser descargadas es:
http://portal.unesco.org/geography/es/ev.php-URL_ID=10876&URL_DO=DO_TOPIC&URL_SECTION=201.html

miércoles, 25 de marzo de 2009

EXCLUSIVA: Resultados de Ciencias de PISA 2006

Si bien en poco ayuda la publicación de “Ranking de Países”, al dar a conocer datos de las evaluaciones Internacionales de Calidad Educativa, en este caso me permito reproducir un artículo recuperado de la revista MAGISNET, http://www.magisnet.com/ como un elemento probatorio más de la “Tragedia Educativa Argentina”

Finlandia arrasa, mientras que España se queda estancada en los niveles de 2003
MAGISTERIO adelanta en exclusiva los primeros resultados de PISA 2006 en la escala de Ciencias, la estrella del informe de este año. Como era de esperar, España se mantiene estancada.

España vuelve a quedarse donde estaba. Nuestro sistema educativo no evoluciona y nuestros alumnos de 15 años vuelven a sacar en Ciencias la misma puntuación media que en 2003.No es el caso de Finlandia, que si ya fue la reina de la fiesta en 2003, este año sencillamente arrasa, al mejorar 15 puntos respecto al año anterior. Ya le saca 21 puntos al segundo, Hong-Kong, una diferencia significativa.No es el único caso de mejora acelerada. Canadá, con 534 puntos, pasa del puesto 11 en 2003 al tercer lugar en 2006, en la escala de Ciencias. Alemania y Austria también han mejorado considerablemente desde que ambos países se tomaran en serio el diagnóstico y consideraron que no había excusas para estar en esa situación: Alemania ha pasado del puesto 18 al 10, y de 502 a 516 puntos; Austria, que venía del puesto 23, ahora es el 14 de los cuarenta países que se presentaron en 2003, y ha mejorado 20 puntos. Tomarse en serio el diagnóstico, y buscar soluciones en vez de excusas, parece funcionar para mejorar los resultados.

Otros países
Otros países que han mejorado considerablemente en Ciencias han sido Dinamarca, que gana once puestos y 21 puntos con respecto a 2003; y Nueva Zelanda, que pasa del décimo al quinto puesto. Las dos revelaciones de este año son Taipei y Estonia, que se sitúan en tercer y cuarto lugar. Estonia, además, se distancia enormemente de los países de su entorno, y se acerca a su vecino del norte.En el capítulo negativo, las tres caídas más destacadas son Francia, Corea y Macao. Francia, con una evolución sorprendente, pierde 16 puntos con respecto a 2003, consigue sólo 495 –su diferencia con España es tan pequeña que ha dejado de ser significativa– y pasa del puesto 13 al 21. Extremo Oriente, en general, pierde fuelle: Japón cae dos puestos y 13 puntos, Corea del Sur cinco puestos y 16 puntos, y Macao seis puestos y 14 puntos.Un país que sorprende, porque fue la referencia mundial en Educación hace unos años –tanto que muchos sistemas educativos la copiaron en su momento–, es Suecia, que con 503 puntos, se sitúa en el puesto 22, entre Hungría y Polonia. Y llama más la atención si se compara con la vecina Finlandia, con la que ya mantiene 60 puntos de diferencia.Aunque son muchos los análisis que se pueden hacer sobre las diferencias entre Suecia y Finlandia, hay uno que es clave: mientras que en Suecia se ha mantenido durante años la tesis de que el conocimiento no es importante –error extendido a otros países, como España–, en Finlandia jamás se han permitido semejante boutade: por ello están tan considerados los docentes en este país.Otro resultado destacable, aunque esperado, es la posición de los países del sur de Europa: Grecia, Italia y Portugal aparecen juntos, algo por debajo de España, aunque Portugal está mejorando, y el resto no.Por su lado, se estaba esperando la situación de los países iberoamericanos, pues muchos de ellos se presentaban por primera vez. Al final, Chile se sitúa por delante (438), seguido de Uruguay (428) y Méjico (410).

A la cola, sin diferencias significativas, se sitúan Brasil, Argentina y Colombia.

Equidad
La otra liga que parece jugarse en PISA es la de la equidad, que hay que combinar con el porcentaje de alumnos por debajo del nivel mínimo (409 puntos en la escala de PISA). Es decir, contar no sólo que todos los alumnos tengan niveles similares, sino que los menos posibles se queden por debajo de un nivel mínimo.El caso paradigmático se da este año. Finlandia no es la primera en equidad, sino la segunda: este año “gana” Azerbaiyán. El problema es que Finlandia deja por debajo del nivel mínimo al 5% de los alumnos, y Azerbaiyán nada menos que al 72%.Pero lo habitual es que los sistemas educativos más equitativos tengan buenos resultados: tras Azerbaiyán, Finlandia –Castilla y León también tiene el mismo grado de equidad–, Macao y Estonia. Además, dejan descolgados por debajo del nivel mínimo a menos del 10% de sus alumnos.En un segundo nivel de equidad están países como Letonia, Hong-Kong, Croacia, Corea, Hungría, Canadá o Indonesia. Claro que Hong-Kong y Canadá dejan por debajo del mínimo a menos del 10% de los alumnos, Corea al 12%, Croacia y Hungría a más del 15%, e Indonesia lleva descolgados al 61%.España se sitúa en un tercer escalón, al nivel de Suecia o los Países Bajos. El problema es que deja a un 20% de los alumnos por debajo del nivel mínimo según PISA.
Related Posts Plugin for WordPress, Blogger...

Busca en mis sitios