Mostrando entradas con la etiqueta estandarizadas. Mostrar todas las entradas
Mostrando entradas con la etiqueta estandarizadas. Mostrar todas las entradas

domingo, 3 de julio de 2016

LA CALIDAD EDUCATIVA ¿LA DEFINEN LAS PRUEBAS ESTANDARIZADAS?


ALGUNAS REFLEXIONES SOBRE LA ESTANDARIZACIÓN JERARQUIZADORA EN LA EVALUACIÓN DE LA CALIDAD DE LA EDUCACIÓN


En los últimos años las concepciones neoliberales que impregnan los ámbitos económicos, políticos y sociales, han influido de manera relevante en la orientación de la educación de los pueblos y naciones periféricas a los países hegemónicos. Esta tendencia se ha extendido en todos los continentes y regiones, impulsada por organismos transnacionales como la Organización para la Cooperación y el Desarrollo Económicos (OCDE).
Las reseñas noticiosas respecto a los resultados más recientes de las pruebas estandarizadas de evaluación de los aprendizajes, tales como las del Programa para la Evaluación Internacional de los Alumnos (PISA) realizada cada 3 años por la OCDE y las del Tercer Estudio Regional Comparativo y Explicativo (Terce) realizado en América Latina por la UNESCO, provocaron  muchas noticias, de las cuales 3 titulares de noticias que descalifican la educación impartida en las naciones que fueron punteadas por debajo en una escala jerarquizadora, entre éstas, destacan a los países latinoamericanos. Los titulares fueron: Los países de América Latina con peor rendimiento académico (BBC Mundo, 2016); 5 lecciones para América Latina del mayor ranking global de educación (Martins, 2015); ¿Por qué no mejora la educación en América Latina? (Sánchez, 2016). Resaltan estas noticias que esto es un indicador que evidencia las condiciones desfavorecedoras del crecimiento económico de esos países, ya que se parte de la premisa o del supuesto de que la educación en determinadas áreas o disciplinas, es un aspecto determinante en la economía. Por ejemplo, señalan que: “… cuando una gran proporción de la población carece de habilidades básicas el crecimiento económico de un país a largo plazo se ve amenazado… incluso los países con mejor desempeño en América Latina, mucho menos los medios, están muy lejos del mundo desarrollado y muy lejos del lugar donde necesitan estar para competir en la economía global”, (BBC Mundo, 2016).
Incluso llegan a afirmaciones pronosticadoras de la relación causa-efecto, como las siguientes: “…la mala educación de un país hipoteca su economía… Si todos los adolescentes en México fueran a la secundaria y lograran un nivel básico en matemáticas y ciencia, el Producto Interno Bruto, PIB, de México, sería en 80 años 551% mayor que el actual, según el informe. El de Argentina 693% mayor y el de Honduras 2016% más grande” (Martins, 2015). Para reforzar estas consideraciones expresadas en las noticias señaladas, se refiere la opinión de un reputado investigador educativo y participante del informe sobre los resultados de las pruebas estandarizadas: “Eric Hanushek, profesor de la Universidad de Stanford, en EEUU y uno de los académicos más reconocidos en temas de educación, es uno de los autores del nuevo informe que muestra una vez más, la enorme brecha entre los estudiantes latinoamericanos y los del este de Asia”. Por otra parte, además de resaltar las habilidades cognitivas en matemáticas y ciencias como basamento para obtener una educación de calidad, el señalado experto y co-redactor del informe de la OCDE, indica que un aspecto importante para explicar la calidad educativa radicaría probablemente en los valores de la población, como sería el caso de China que junto con Singapur lidera en la tabla de resultados: “Parecen haber convencido a sus ciudadanos de hacer opciones que valoran la educación por encima de otras cosas”. (ob.cit.).
Estas noticias explicitan una marcada preocupación por el denominado “estancamiento” de la calidad de la educación en demasiados países de América Latina producto de los resultados de estas pruebas. Sánchez (2015) señala que esto es un problema importante en una economía globalizada, donde las recompensas van a parar a los trabajadores mejor cualificados y más productivos, y donde se le da más importancia que nunca a la educación de “alta calidad”. La masiva expansión del acceso a la educación en la región no es suficiente sin una mejora equivalente en calidad.
Frente a esta perspectiva, se presentan otros discursos alternativos, como el de Rubia (2016) que ante estos juicios valorativos de organismos internacionales, como la OCDE, analiza y evidencia cómo el concepto de “educación de calidad” se ha ido reduciendo al resultado de las pruebas y esto ha modificado la manera de entender y concebir la educación. Las pruebas condicionan los conceptos de forma reduccionista, lo que se entiende por un “buen currículo”, un “buen colegio” o un “buen alumno” dependerá básicamente de los resultados obtenidos. Hay otro cambio fundamental y es que el alumno queda subordinado a la escuela y no la escuela al alumnado, es decir, los centros seleccionan al alumnado que potencialmente va a dar buenos resultados y rechaza a los que considera que le van a perjudicar. Todo ello puede provocar además, la desaparición de las ya reducidas experiencias innovadoras pues los centros se verán obligados a poner en marcha metodologías de aprendizaje diferentes, de carácter tradicional, para que sus alumnos no se vean perjudicados en los exámenes estandarizados.
Esto supondrá según este autor:
“el retorno a modelos aún más memorísticos …en estas pruebas, nadie comprueba si el alumno es capaz de aplicar sus conocimientos a situaciones reales de la vida cotidiana, nadie comprueba su capacidad creativa para mostrar nuevas dimensiones de un problema, nadie comprueba su capacidad de reflexionar y ampliar contenidos, nadie comprueba su capacidad crítica y de análisis..” (ob.cit., p.9)
En esta misma tónica crítica Angélique del Rey (2013) advierte los peligros de estos señalamientos al indicar que las pruebas en cuestión evalúan las matemáticas y la lectura, razón por la cual los centros dejan de lado otros contenidos como la música, las artes, etc. para centrarse en lo único que va a ser valorado, enseñando así solo para la prueba, de manera sistemática pero rutinaria.
Es así, como reivindicamos críticamente lo señalado por otros investigadores con base en las consecuencias de asumir instrumentalmente la concepción de la calidad educativa reduciéndola a los resultados de dichas pruebas, cuando se hacen pronósticos lineales futuristas arbitrarios, de causa-efecto, entre habilidades cognitivas y crecimiento económico, que como se sabe es una postura por demás simplificadora ante la multidimensionalidad de aspectos que envuelven al desarrollo de una nación.
Asimismo, se evidencia una estrategia discursiva de legitimación ideológica en las noticias sobre el informe de la OCDE, al presentar juicios avalados por la opinión de un experto educativo que es a la vez miembro del mismo organismo que emite el informe. Experto que cae en contradicciones que pone en entredicho sus mismos juicios, cuando dudosamente asoma, para el caso de China, en la entrevista citada en la noticia, deja entrever que la calidad de la educación con base en los resultados de las pruebas hechas, dependería mucho más de la incitación o promoción del contexto o valoración sociocultural a la educación en la sociedad.
Entonces, ¿Cuáles son los significados ideológicos relevantes de esta estandarización jerarquizadora?
  1. Inducir la aceptación de escalas estratificadoras socioculturalmente en la educación que se correspondan con la división social y jerárquica que reproduce la sociedad capitalista.
  2. Sobre la base de una jerarquización de los resultados de las pruebas, se pretende que los países que presuntamente salieron rezagados en las posiciones “deben” imitar en sus políticas y prácticas educativas a los países que resultaron mejor ubicados, con base a las orientaciones de la OCDE.
  3. Inducen a una significación de “alta calidad educativa” con base en desempeños y logros operacionales de las habilidades cognitivas expresados en las pruebas en función del mercado laboral. Al valorarse dichas habilidades en relación con los requerimientos del mundo laboral capitalista se privilegia la calificación tecnocrática de la fuerza de trabajo a través de la educación escolar.
  4. Se asimila a la educación la noción de capacitación, la educación no se ve como un proceso holístico, integral, global, humanizado.
  5. Invisibilizar los avances de inclusión educativa en algunas regiones, como es el caso de América Latina, al sobrevalorar sus criterios de calidad tecnocráticos de la educación.
Por todo lo anteriormente expresado, es pertinente trascender la visión tan reductora del enfoque neoliberal en la educación que significa reducir la calidad educativa a los resultados de las pruebas estandarizadas, excluyendo de ello las valoraciones culturales de los pueblos como indicadores contextualizados de dicha calidad  en la institución escolar.
La calidad educativa reclama la discusión de procesos pedagógicos adecuados, de debates curriculares que superen la fragmentación de elementos y procesos, de su pertinencia en relación con los fines y metas de cada sociedad, y por ende de una evaluación que se resignifique en los criterios señalados para potenciar el bienestar humano.


Fuente

Venezuela/ Febrero de 2016/ Autores: PORTAL OTRAS VOCES EN EDUCACIÓN.

martes, 6 de noviembre de 2012

Las evaluaciones estandarizadas y los contextos sociales

Los que estamos vinculados al sistema educativo, conocemos la influencia del entorno social en los procesos de aprendizajes ¿Puede tener una evaluación estandarizada la capacidad de tenerlos en cuenta? ¿Son realmente un instrumento fiel, para medir Calidad Educativa? ¿Qué limitaciones tienen? Los siguientes párrafos hacen su aporte.



Es común escuchar que el ser humano es un ser social, por lo tanto, lo que sucede a su alrededor, en diferentes grados, moldea y afecta tanto sus acciones como su personalidad. El estudiante no escapa a esta regla, dado que la educabilidad se encuentra, al menos en parte, definida por las condiciones en que tiene lugar la escolarización. Sin lugar a duda el contexto en el que el estudiante vive deja sus huellas en su proceso de educación.



Los sistemas de evaluación estandarizada se utilizan con todos los estudiantes del sistema educativo. Ello, trae problemas en países en los que conviven integrantes de diferentes culturas, quienes no siempre tienen como lengua nativa al idioma oficial del país en el que residen. Los alumnos que deben, por ejemplo, rendir una evaluación de alcance nacional en inglés, pero tienen como lengua primaria el español, se encuentran claramente en una situación de desventaja. Por lo tanto, en estos casos, en los que existen diferencias en cuanto al nivel de manejo del idioma del examen, se puede determinar erróneamente que el nivel educativo de una escuela es malo cuando en realidad existen otros factores que determinan que los resultados sean bajos. Haladyna, entre otros, expresa con mucha claridad que los resultados de las evaluaciones están estrechamente vinculados a la influencia de las condiciones socio económicas en las que vive el estudiante, por lo tanto, el origen étnico y cultural de los estudiantes debe ser un factor a tener en consideración a la hora de evaluar el rendimiento de las evaluaciones. Por lo tanto, no sería descabellado afirmar que por su metodología, las evaluaciones estandarizadas hacen la vista gorda a todas estas particularidades que son elementos constitutivos del aprendiz.



Como ya he mencionado en otras partes de este trabajo, los resultados de las evaluaciones estandarizadas adoptaron mucha importancia con el correr del tiempo. Como consecuencia de ello se creó una “industria” que ofrece libros de texto específicos para que los alumnos se preparen para los tests. A su vez, es muy común en países como Corea y Japón, que los estudiantes contraten profesores particulares para perfeccionar sus técnicas de rendición de examen. Teniendo en cuenta la idea que cuanto mas se ponga en juego según los resultados obtenidos en las evaluaciones, mayor será la preocupación que los estudiantes tengan por su puntaje, es lógico afirmar que existe una gran demanda, por parte de los estudiantes de las clases mas pudientes, a contratar a todo aquel que pueda ayudar a obtener un mejor resultado en las evaluaciones estandarizadas. Suen sostiene que en Japón existe un sistema de educación paralelo, al que la autora ha denominado “shadow education” mediante el cual los estudiantes acuden a profesionales especializados en la enseñanza de estrategias para obtener mejores resultados en las evaluaciones. En una sociedad tan heterogénea y con niveles de desigualdad tan grandes como la nuestra, esto plantea un inconveniente: la mala distribución de recursos pasa a ser un determinante a la hora de obtener un puntaje alto en estos exámenes.



Por otro lado, en los Estados Unidos, por ejemplo, uno de los valores que se persiguieron a trabes de las evaluaciones estandarizadas es el de equidad: es decir, que todos  los estudiantes, más allá del contexto social y económico al que pertenecen puedan progresar. Hasta este punto, uno podría afirmar que no existe nada malo en ese fin, de hecho es un objetivo de valor. El problema surge cuando el incumplimiento trae consecuencias graves para los estudiantes. Por ejemplo, ¿cuál fue el impacto que tuvo NCLB en la brecha que existe entre los alumnos más favorecidos y los pertenecientes a grupos mas marginados? Causey-Bush se refirió a los casos de California y de Texas, dado que el 34% de la población de color en los Estados Unidos, pertenece a estos dos estados. De acuerdo a los datos del Departamento de Políticas Educativas y división de evaluación de California, y de la Agencia de Educación de Texas, en el año 2003 solamente los alumnos “blancos” (no de origen hispánico) fueron los únicos de cumplir con los estándares propuestos, tanto en California como en Texas. Tal como sugiere Kohn, uno de los daños colaterales de esta iniciativa fue que como resultado se penalizo –a trabes de un menor financiamientoa aquellas instituciones que no lograron buenos resultados.


Son muchos los autores que han sugerido la importancia del contexto socio económico en el proceso de aprendizaje. Karp menciona que en el año 2003 Educational Testing Services, una de las empresas que confeccionan exámenes estandarizados, más importantes del mundo, concluyó que existen alrededor 14 factores responsables de la brecha entre los que logran buenos resultados y aquellos que fracasan. Entre aquellos factores se mencionaban el nivel de pobreza, la alimentación de los niños, la educación de los padres, la atención medica que recibieron durante la infancia. Similarmente, Karen sostuvo que el acceso a un buen servicio médico, la estabilidad emocional en el entorno familiar del niño, la integración del niño en la comunidad y las condiciones socio económicos de la comunidad a la que pertenece el alumno, son solamente algunos de los tantos factores que afectan el nivel educativo del educando. Con lo cual, creo que estos datos deberían ser suficientes para, al menos, ser cautelosos a la hora de asignarle importancia a los resultados de las evaluaciones estandarizadas.



En definitiva, ¿es la escuela la institución facultada para confeccionar políticas que garanticen el libre acceso para todos al servicio médico público, que aseguren la asignación de recursos del presupuesto anual para la implementación de recursos modernos en el proceso de formación educativa, entre otros casos? La respuesta es claramente no.


Lógicamente existen políticas públicas que exceden a aquellos encargar de las políticas educativas. Es decir, no sería justo pedirle a quienes diseñan las políticas educativas que resuelvan el problema de que en algunas casas por el tipo de pintura con altos grados de plomo existan alumnos con deficiencias en su proceso de aprendizaje. Probablemente tampoco este dentro del campo de acción de los encargados de delinear las políticas educativas resolver los problemas de acceso a los servicios médicos o al tipo de nutrición que reciben los alumnos de los sectores menos pudientes. Sin embargo, ello no implica que no haya nada que se pueda hacer. Al menos lo que se puede hacer es no agravar la situación de los alumnos que asisten a este tipo de instituciones. Al atar el resultado de las evaluaciones estandarizadas a cuestiones como el financiamiento que reciben las escuelas (tal como sucede en los Estados Unidos) o a la posibilidad de acceder al circuito de educación superior (como sucede en países como Chile, Holanda o Nueva Zelanda), lo que se esta haciendo es perpetuar esas inequidades. Probablemente una mejor estrategia sea reconocer el crecimiento de esos alumnos, en definitiva un estilo de evaluación teniendo en cuenta el valor agregado, más que el resultado final. Al menos, de esa manera se estaría dando la posibilidad a que estos alumnos asistan a escuelas con un mejor financiamiento, y que en última instancia, puedan crecer en la escala social a través de una mejor educación superior.





Extraído de
Evaluaciones Estandarizadas: Seis Reflexiones Críticas
Ignacio Barrenechea
George Washington University (GWU).
Archivos analíticos de políticas educativas
Revista académica evaluada por pares, independiente, de acceso abierto y multilingüe
Arizona State University
Volumen 18 Número 8         


domingo, 15 de julio de 2012

Críticas a la evaluación estandarizada

Las Evaluaciones Internacionales de Calidad Educativa son blanco de numerosas críticas, y objeto de usos inadecuados, pero en este caso, los siguientes párrafos analizan las limitaciones que tienen todas las evaluaciones estandarizadas.


A la luz de estas preocupaciones, en los últimos años se han multiplicado las experiencias, investigaciones y artículos donde se mencionan otros tipos de evaluación que suelen etiquetarse como «auténticos», «alternativos»,«directos»,«basados en actuaciones». Todos ellos pretenden superar las críticas dirigidas a los métodos de evaluación estandarizados. A continuación se describen algunas de las críticas citadas con mayor frecuencia:

1. Miden sólo conocimiento declarativo y no procedimental. Los ítems suelen referirse al recuerdo de hechos y resultados y rara vez evalúan estrategias o habilidades procedimentales.

2. Se centran en el resultado y no en el proceso. No pueden explicar el porqué de las diferentes ejecuciones, ni el proceso por el cual llegan a obtener un resultado correcto o incorrecto.

3. No cubren adecuadamente el dominio evaluado. Esta crítica, dirigida a la validez de contenido, no se centra exclusivamente en este tipo de medición. Muchas alternativas a los tests siguen sin representar adecuadamente lo que se pretende evaluar.

4. Existen diferentes habilidades e incluso inteligencias que no son evaluadas por este tipo de tests. Desde la teoría de Gardner de las inteligencias múltiples, donde incluye junto a las tradicionales inteligencias lingüística, lógico matemática y espacial, las inteligencias corporal kinestésica, musical, interpersonal e intrapersonal, se sugiere un sistema de evaluación con medidas más auténticas. También Powell critica la limitación del contenido de estos tests a las áreas académicas.

5. Son medidas relativas. Los tests clasifican a las personas dentro del grupo de referencia según la puntuación obtenida, pero en muchas ocasiones el objetivo de la evaluación no es clasificar, sino averiguar lo que ha aprendido el estudiante, o su nivel de dominio en una tarea o campo concreto, independientemente del nivel de su grupo. Además, se debe añadir la dificultad de conseguir una adecuada muestra de referencia.

6. La estandarización supone una muestra homogénea. Sin embargo, la muestra evaluada es heterogénea, con diferente dominio del lenguaje, actitudes y valores.

7. El formato de elección múltiple limita las evaluaciones y supone otras habilidades distintas a las evaluadas. Las inferencias realizadas suponen habilidades subyacentes a las respuestas del test. Además, con frecuencia dependen demasiado de las habilidades verbales de las personas evaluadas o en una única forma de ver el mundo, lo cual perjudica los resultados obtenidos por algunos grupos.

8. Se alejan de las verdaderas demandas contextuales. Al buscar simplicidad y estandarización, el diseño de estos tests hace difícil detectar cómo la gente desarrolla habilidades específicas en ambientes complejos, más reales.


 
Este tipo de evaluación no ofrece a los estudiantes la oportunidad de mostrar sus verdaderas competencias. Los objetivos son homogeneizados y no representan adecuadamente los intereses de cada estudiante en su currículum; la puntuación también se centraliza y se basa en criterios establecidos por personas que no conocen a los estudiantes, sus metas, o sus oportunidades de aprendizaje.

Cada vez son más las razones que impulsan a los expertos en el campo de la medición a buscar alternativas. Bajo la precisión, objetividad y ahorro en tiempo y dinero que ofrece el uso de tests estandarizados, se realizan selecciones que reflejan sólo una o pocas dimensiones de las diferencias individuales, no se mide a «toda la persona», cuando es precisamente «toda la persona» la que es contratada para un trabajo o seleccionada para realizar determinada tarea.





Extraído de
La evaluación convencional frente a los nuevos modelos de evaluación auténtica
Amaia Bravo Arteaga y Jorge Fernández del Valle
Universidad de Oviedo
En Psicothema 2000. Vol. 12, Supl. nº 2, pp. 95 99





Publicaciones recomendadas
La calidad requiere liderazgo
El aprendizaje cooperativo
Perversiones audiovisuales


martes, 8 de marzo de 2011

Efecto evaluación

Llama la atención que la siguiente nota fuera publicada en ¡El Mercurio! Vocero del conservadorismo chileno. Resulta interesante las conclusiones de esta funcionaria finlandesa.

Los sectores conservadores ponen de ejemplo al "Modelo chileno" ¿No será entonces que las magras diferencias con el resto de Sudamérica se deben a un "efecto evaluación"

Evaluaciones estandarizadas

Piia Seppänen, académica finlandesa de visita en Chile, se mostró contraria al exceso de mediciones de la calidad educativa y opuesta a la enseñanza privada, y se explayó sobre los factores históricos y culturales que han sido clave para el éxito educativo de su país.


"En mi país, las mediciones y pruebas de la calidad de la educación no son un tema ni para los políticos, ni para los padres, ni para los expertos", dice la investigadora del Centre for Research on Lifelong Learning and Education de Finlandia, sorprendida porque en Chile se habla tanto de esto.


Explica que hay estudios que muestran que estos tests influyen en las prácticas educativas y que no necesariamente mejoran los resultados. "Y los profesores terminan preparando para el test y no para las necesidades educativas de los alumnos. Las sociedades que tienen grandes cantidades de mediciones no mejoran los resultados, de modo que no tiene sentido", explica.


Aclara que no es que no les preocupe medir los conocimientos de los niños. De hecho, hacen un test estandarizado con una muestra y se hace muy tardíamente, al inicio de la educación media, en dos o tres materias y cada tres o cuatro años. Y los resultados no se publican.


"El ministerio está pensando hacer más evaluaciones, pero de manera muestral, no a todos los niños y para tomar decisiones de desarrollo del sistema, no para comparar ni publicar. Estas evaluaciones están más orientadas a detectar qué niños necesitan apoyos y dónde poner bien los recursos, de modo que es algo que tiene mucho más que ver con la escuela y los profesores. La evaluación es para el desarrollo pedagógico y no para compararse entre escuelas", sostiene.


Piia Seppänen estuvo en Chile invitada por el Centro de Estudios de Políticas y Prácticas en Educación (Ceppe) y la Facultad de Educación Universidad Católica para participar de un seminario acerca de las claves del éxito educativo de Finlandia, y en donde desarrolló los factores históricos y culturales que explican los buenos resultados en pruebas internacionales, como PISA.


Expuso que su historia de nación dominada por otros países, como Suecia y Rusia, hace que sean una sociedad "obediente", como ella la llama. "Los niños son obedientes y respetan a los profesores y este es un rasgo cultural, que se transmite desde los padres, porque la sociedad tiene una alta y fuerte confianza en los maestros. Eso se traduce en que los padres no interfieren en lo que los profesores hacen, no los evalúan ni los cuestionan. Entonces se mezcla la confianza en los profesores y la autoridad que estos tienen dentro de la sociedad".


Y aclara que este respeto y jerarquía también va de la mano de un sistema social muy igualitario. Por eso, se mostró contrariada frente al sistema chileno.


"Por lo que noté, permite el lucro y yo entiendo que la escuela es para construir ciudadanos y para formarse entre iguales, para construir nación y una sociedad cohesionada. Y me cuesta entender cómo este objetivo puede convivir con un sistema educativo organizado a través del lucro", explica.


"La sociedad", agrega sin pausa, "debe educar a su gente y pone dinero para eso. Entonces, no entiendo cómo hay quienes se llevan ese dinero, que es para formar ciudadanía y formar cohesión. En Finlandia pagamos muchos impuestos, pero el Estado te da todos los recursos, como el colegio o la universidad".


Fuente: El Mercurio, Chile


martes, 24 de marzo de 2009

Las Evaluaciones Educativas que América Latina Necesita III

LOS PROPÓSITOS Y LOS USOS DE LOS RESULTADOS DE LAS EVALUACIONES ESTANDARIZADAS
Sea en la implementación de un sistema de evaluación o en su reforma, es necesario considerar algunas opciones básicas de acuerdo a lo que se espera de él.

El primer paso es definir cuál será el propósito del sistema de evaluación y para qué se usarán sus resultados

Es preciso considerar diversas opciones, que no son necesariamente excluyentes. Un sistema puede combinar varias de ellas, pero es importante tener conciencia de que cada opción requiere de un determinado diseño y tiene exigencias técnicas y de costos diferentes. Se debe analizar si el sistema nacional de evaluación será:
  • de carácter diagnóstico (para alumnos, escuelas o sistema educativo), sin consecuencias directas para los estudiantes, cuya finalidad principal es enriquecer con información de calidad las percepciones, decisiones y acciones de diversos actores del sistema –autoridades y cuerpos técnicos, supervisores, directivos, docentes, estudiantes y sus familias– para mejorar la enseñanza y el aprendizaje.
  • de certificación de los logros educativos de los estudiantes, cuyo propósito central es establecer quiénes han alcanzado los conocimientos y desempeños necesarios para aprobar un curso o nivel y, en consecuencia, aprueba o reprueba.


Es necesario también establecer un adecuado balance entre la implementación de pruebas nacionales y la participación en pruebas internacionales


Las pruebas nacionales pueden ofrecer una mirada más apropiada acerca de qué aprenden los estudiantes de aquello que se les está enseñando, mientras que las pruebas internacionales pueden servir para ubicar la situación del país en relación a lo que saben y son capaces de hacer los estudiantes en otras sociedades y enriquecer el debate sobre el currículo nacional y el enfoque de la enseñanza. Los países deberían analizar cuidadosamente en qué pruebas internacionales participar, teniendo en cuenta lo que cada una pretende evaluar y su pertinencia en relación a los objetivos nacionales. Parece recomendable participar periódicamente en al menos una evaluación regional o internacional, en el marco de la política de prioridades que cada país defina.


Evaluaciones para la certificación de los aprendizajes de los estudiantes

Un sistema de evaluación para certificar los aprendizajes de los estudiantes a través de exámenes nacionales de alta calidad técnica tiene ventajas asociadas a la transparencia y responsabilidad por los resultados


Hoy es común que dos estudiantes que han aprobado un mismo nivel educativo en dos regiones distintas de un país, posean en realidad niveles de conocimiento muy diferentes. Los sistemas de evaluación para la certificación dan transparencia al valor de los certificados educativos ante la sociedad. Además, dichos sistemas hacen responsables tanto a los docentes como a los propios estudiantes por alcanzar los conocimientos y capacidades que evalúa el examen, lo cual tiene impactos positivos sobre el aprendizaje. En todo caso, la evaluación externa con propósitos de certificación es más apropiada para los ciclos superiores del sistema educativo, sobre todo hacia el final de la educación media.


Un sistema de evaluación para la certificación implica algunos requerimientos que son costosos


Por una parte, las pruebas deben ser de carácter censal y cada estudiante debe tener más de una oportunidad para rendirla, lo cual requiere implementar varios operativos de evaluación cada año. Por otra parte, las pruebas deben tener una amplia cobertura curricular, lo cual requiere que sean extensas, en lo posible con preguntas de respuesta construida (que tienen un importante costo de codificación) y deben abarcar varias asignaturas o disciplinas.


Un sistema de evaluación para la certificación puede generar tensiones importantes que es necesario anticipar

Si las pruebas son exigentes, ello puede conducir a niveles de reprobación muy altos, que afectarían principalmente a los sectores sociales más vulnerables y podrían agudizar problemas como la deserción y el desempleo juvenil, lo cual las haría insostenibles desde el punto de vista social y político. Por ello, es preciso acompañar este tipo de evaluaciones (en realidad todo tipo de evaluaciones, pero estas en particular) con acciones pedagógicas de carácter complementario y compensatorio. Proponer estándares altos implica asumir responsabilidad sistémica por proporcionar todas las oportunidades para aprender: textos, materiales, instalaciones y preparación de maestros, entre otros. Existen diversos caminos para enfrentar este problema:

  • Establecer que la evaluación estandarizada constituya solo una parte del proceso de certificación de aprendizajes de los estudiantes (por ejemplo, el 40% de su calificación final). El resto de la nota correspondería a las evaluaciones que realizan los docentes a cargo de los estudiantes. Si bien en este caso se mantiene el problema respecto a la heterogeneidad de los criterios de evaluación empleados por los docentes, es una forma de combinar la evaluación externa y la interna, e incluso de aportar a los docentes una mirada externa que les permita reflexionar sobre sus propios criterios.
  • Establecer un periodo de transición hacia estándares únicos y universalmente aplicables. Durante dicho período, el foco principal se centra en la mejoría o progreso de los estudiantes de cada escuela respecto a su situación anterior, y no únicamente en el cumplimiento del estándar absoluto de certificación.


La peor respuesta que podría darse a este problema sería establecer un porcentaje fijo de reprobación, por ejemplo, no debe reprobar más del 10% de los estudiantes. Ello implica utilizar pruebas más fáciles y, por lo tanto, enviar a estudiantes, familias y educadores una señal equivocada respecto a las expectativas de aprendizaje.


Evaluaciones de carácter diagnóstico y formativo


Un sistema de evaluación de tipo formativo y sin consecuencias directas para los estudiantes tiene ventajas en términos de costos, posibilidades de diseño y de establecimiento de estándares altos, y aporte a una cultura de evaluación


Los costos de aplicación de estas pruebas pueden ser menores, dado que pueden hacerse en base a muestras y aplicarse solo en algunos grados claves y cada cierto número de años. Por otra parte, las pruebas pueden diseñarse con carácter matricial, en que no todos los estudiantes responden a las mismas preguntas sino a bloques de las mismas, lo cual permite trabajar con una cantidad muy grande de preguntas y obtener un análisis más detallado de los distintos aspectos del currículo. Estos sistemas permiten definir estándares o niveles de expectativa exigentes sin que ello produzca un fracaso generalizado. Asimismo, ayudan a construir una cultura de la evaluación y a acumular capacidad técnica, de modo que, cuando se analice la posibilidad de establecer un sistema con consecuencias, existan las condiciones para hacerlo apropiadamente. Una de las alternativas a considerar entre los usos de carácter formativo es la de “liberar” una prueba completa para que sea aplicada en forma autónoma por parte de los maestros, con el fin de ayudarles a identificar dificultades de alumnos individuales y de enriquecer su repertorio de instrumentos de evaluación.


El principal problema de estas evaluaciones es que pueden carecer de impacto si no se toman algunas acciones complementarias


Las evaluaciones de carácter diagnóstico y formativo pueden resultar intrascendentes si no van acompañadas de una estrategia precisa y de una inversión importante para asegurar la divulgación de los resultados y su uso en acciones educativas posteriores, puesto que su efectividad se juega en que los diferentes actores reciban, comprendan y utilicen los resultados. Por esto hay que tener presente que:

  • Para que los resultados de este tipo de evaluaciones tengan impacto sobre las políticas educativas, se debe invertir tiempo en el análisis y discusión de los mismos por parte de diversas áreas del Ministerio de Educación y otros actores relevantes, en la comprensión de los problemas y deficiencias que los resultados ponen de manifiesto y en la concepción de acciones e inversiones apropiadas para hacerles frente. Las autoridades deben estar dispuestas a someter sus políticas y decisiones al escrutinio de la ciudadanía, para lo cual es necesario también invertir en la comunicación apropiada y permanente de los resultados a la opinión pública.
  • Para que los resultados tengan impacto sobre las prácticas de enseñanza, es imprescindible asimismo invertir tiempo en el análisis e interpretación de sus implicancias didácticas: si los estudiantes no son capaces de resolver cierto tipo de situaciones, ¿qué es lo que se está haciendo de manera insuficiente o inapropiada en las aulas y qué es lo que se debería hacer? Este tipo de análisis debe ser realizado tanto por especialistas en la didáctica de las áreas evaluadas como por los docentes, creando para este último efecto espacios permanentes y sistemáticos de formación en servicio y de trabajo colectivo al interior de las escuelas. Es muy importante que los maestros puedan analizar la mayor cantidad posible de ítemes para poder identificar cuáles revelan un bloqueo importante para el desarrollo de nuevos conceptos o capacidades. Sin embargo, siempre será necesario conservar el carácter confidencial de una parte de los ítems para poder realizar mediciones comparables en el tiempo.
  • Para que los resultados tengan impacto sobre la motivación de los estudiantes y sobre la actitud de las familias hacia el aprendizaje escolar, es necesario proveerles de información apropiada y comprensible acerca de lo que se considera imprescindible haber aprendido en cada grado o nivel educativo y de las acciones que pueden contribuir al logro de dichos aprendizajes.

Evaluar con una perspectiva ampliada

Es muy importante que las pruebas no se limiten a evaluar los conocimientos y competencias correspondientes a un único grado (aquel en que se aplica la evaluación), sino que incluyan una perspectiva más amplia de niveles de desempeño –desde más básicos a más complejos– a lo largo de varios grados, de modo de identificar qué han aprendido los estudiantes en grados anteriores y qué necesitan ahora. De este modo, los docentes podrán constatar y subsanar las deficiencias en los aprendizajes de cursos previos, que impiden a los estudiantes continuar avanzando y los resultados serán útiles no sólo para los docentes del grado evaluado, sino también para los de grados anteriores. El énfasis no estará puesto en comunicar a los docentes que los estudiantes “aprueban” o “desaprueban”, sino en comunicar que están en diferentes puntos de un continuo de aprendizaje, en el que todos pueden y necesitan progresar.


Las pruebas de tipo diagnóstico pueden tener carácter muestral o censal, dependiendo de la estrategia de cambio educativo

El carácter censal o muestral tiene diversas implicancias, aunque también es posible combinar una aplicación por muestras controlada con una distribución censal de las pruebas para su aplicación en forma autónoma por parte de las escuelas, con fines formativos y de análisis de resultados e identificación de estudiantes que necesitan apoyos complementarios.

  • Las pruebas a base de muestras sirven para tener un diagnóstico global del sistema. Requieren de un cuidadoso diseño de la muestra, de modo de obtener información representativa para los niveles de desagregación en los que se desee actuar y tomar decisiones (regional, provincial, municipal; urbano y rural; escuelas indígenas, etc.). El impacto de los resultados de estas pruebas depende principalmente de las medidas de política educativa que se tomen a nivel central y de una estrategia de difusión apropiada que llegue a todas las escuelas.
  • Las pruebas censales sirven para obtener información de cada una de las escuelas e incluso de los alumnos. El impacto de sus resultados depende de la devolución de la información a cada comunidad educativa, con un enfoque y un formato adecuados para promover una mayor participación y compromiso a nivel local. La información también puede resultar muy útil para dirigir mejor las políticas hacia distritos o escuelas con mayores problemas, ya que se puede contar con un “mapa” de resultados de todas las escuelas, zonas, provincias, tipos de escuela, etc.


Uso de las evaluaciones para establecer incentivos
Además de las opciones examinadas, existen políticas de evaluación estandarizada dirigidas a establecer incentivos económicos en función de los resultados o a propiciar un mercado competitivo entre las escuelas


Tres son las principales modalidades en este tipo de políticas:

  • Utilizar los resultados para construir rankings de escuelas y hacerlos públicos, como forma de: fomentar la responsabilidad de las escuelas por sus resultados; entregar a las familias información para la toma de decisiones sobre la escuela a la cual enviar a sus hijos; promover la competencia entre los centros educativos por obtener mejores resultados.
  • Utilizar los resultados para entregar incentivos económicos a las escuelas que obtienen mejores resultados o mejoras en relación a sus resultados en evaluaciones anteriores.
  • Utilizar los resultados como indicador de la calidad del trabajo de cada docente y como criterio para otorgar incentivos económicos.

Estos enfoques de uso de la evaluación a veces se constituyen, con o sin intención deliberada, en un mecanismo por el cual el Estado renuncia a su responsabilidad por los resultados del sistema educativo


En ocasiones, el Estado limita su accionar a la realización de evaluaciones, la entrega de resultados y el establecimiento de incentivos en función de estos resultados, transfiriendo la responsabilidad por los resultados a la relación entre escuelas y familias, como si se tratase de un asunto entre actores privados, en lugar de ocuparse de crear las condiciones para que la enseñanza resulte efectiva proveyendo los recursos necesarios, constituyendo un elenco docente adecuadamente formado y estableciendo mecanismos idóneos para la evaluación y la orientación de la labor de las escuelas. Este modo de operar no considera la complejidad de la labor educativa, en especial en medios socialmente desfavorecidos, y la necesidad de invertir en la creación de capacidades como herramienta principal para la mejora de la enseñanza y el aprendizaje.


Criterios básicos para la divulgación y uso de los resultados
La responsabilidad por los resultados debe ser compartida por diversos actores
Debería evitarse todo uso de los resultados con el fin deliberado o implícito de culpabilizar o responsabilizar de manera exclusiva a ciertos actores. La responsabilidad debe ser compartida entre las autoridades nacionales y regionales, los cuerpos docentes, los estudiantes y sus familias.


La responsabilidad por los resultados requiere de una adecuada combinación entre las exigencias y los apoyos a las escuelas y a los docentes


Por un lado, es necesario que escuelas y docentes asuman su responsabilidad respecto al objetivo de que todos los estudiantes aprendan lo que se espera de ellos. Simultáneamente, es deber de las autoridades establecer las políticas de apoyo necesarias para que escuelas y docentes puedan desarrollar su labor de manera apropiada. Un esquema de exigencias altas sobre escuelas y docentes sin los correspondientes apoyos solo puede generar malestar y desánimo. Un esquema de apoyos sin contrapartes y exigencias puede generar autocomplacencia.
Es inapropiado utilizar los resultados de las pruebas estandarizadas como indicador principal de la calidad del trabajo del docente o de la escuela


Esto es importante, en particular si no se ha controlado el efecto de otros factores internos y externos al sistema educativo y si no se tiene en cuenta que el aprendizaje depende también de la motivación y esfuerzo personal del estudiante. Además, dado que los resultados de pruebas estandarizadas no son el único indicador de la calidad de la educación, es preciso considerarlos en conjunto con otros aspectos relevantes como la retención, la pertinencia y relevancia de lo que se enseña, la formación de valores y hábitos o la formación ciudadana. Debe evitarse la identificación del término “calidad” con resultados de pruebas estandarizadas.


Para facilitar la comprensión y uso de los resultados, no basta con ofrecer resultados numéricos


Es fundamental ilustrar a los distintos actores acerca del tipo de tareas que los estudiantes debieron resolver en las pruebas. Este criterio debe combinarse adecuadamente con la necesidad de mantener el carácter confidencial de un conjunto de preguntas, que puedan emplearse en futuras evaluaciones para establecer mediciones comparables en el tiempo. Si bien no se pretende que los docentes utilicen pruebas estandarizadas para evaluar a sus estudiantes, el conocimiento y la comprensión de las mismas pueden contribuir a mejorar sus modos de evaluar y a desarrollar una cultura de la evaluación.


Al reportar las diferencias de resultados en función de la composición sociocultural del alumnado de las escuelas, se debe cuidar de no crear un sistema de expectativas de logro diferenciado por grupos sociales
En todo caso, las diferencias deberían producirse en las políticas para crear condiciones apropiadas para enseñar a los grupos más desfavorecidos. Se debería descartar también cualquier tipo de uso de los resultados que, directa o indirectamente, propicie la selección de estudiantes por parte de las escuelas a los efectos de mejorar sus resultados.


Advertencias sobre la comparación de resultados entre escuelas
Aunque los resultados de pruebas estandarizadas no dan cuenta en forma exhaustiva de la calidad educativa de una escuela, sí aportan información relevante de los niveles de desempeño alcanzados


La información sobre resultados en dos pruebas estandarizadas –en general, lenguaje y matemática– no constituye por sí misma una evaluación de la “calidad educativa” de las escuelas ni debería presentarse al público como tal. La “calidad” de una escuela incluye otros aspectos relevantes y valorados por los docentes, estudiantes y familias, tales como el desarrollo emocional, las relaciones interpersonales, la formación cívica y en valores, entre otros. Aun así, la información comparativa acerca de los niveles de desempeño alcanzados por los estudiantes en una diversidad de escuelas puede ser relevante para los equipos docentes de las escuelas, en la medida en que enriquece la percepción de la propia labor, permitiéndoles ubicar los logros de sus estudiantes en el contexto de los alcanzados por los estudiantes en otras escuelas.


Para que la comparación entre los niveles de desempeño de los estudiantes sea apropiada, se deben considerar sus condiciones sociales de origen


Los resultados académicos de las escuelas deberían poder compararse con los de escuelas de similar composición social, dado que los retos y dificultades que implica enseñar a estudiantes de origen desfavorecido (o de lengua materna indígena) son muy diferentes que en el caso de estudiantes de familias con educación secundaria completa y/o terciaria. También hay que tener en cuenta las tasas de deserción de las escuelas y sus políticas de selección de estudiantes, dado que una escuela puede mejorar sus resultados a través de la exclusión de estudiantes con dificultades.


Las comparaciones entre escuelas deben considerar la diferencia entre medir el “logro educativo” y medir el “aprendizaje”


En rigor, si el propósito es entregar a las escuelas, familias y/o autoridades, información acerca de la capacidad de enseñar de los docentes y las escuelas, es necesario medir el progreso de los estudiantes a lo largo de un período lectivo (“aprendizaje”) y no únicamente el resultado final (“logro”). Las diferencias entre estos dos términos se expresan en que:

  • El aprendizaje puede ser definido como el cambio ocurrido en los conocimientos y capacidades de cada estudiante a lo largo del año lectivo. Su medición requiere la aplicación de dos pruebas, una al inicio y otra al final. De este modo es posible constatar el progreso realizado por cada alumno.
  • El “logro educativo” en cambio, se mide con una única prueba y refleja la acumulación de conocimientos y capacidades a lo largo de toda la vida del estudiante, lo cual incluye el capital cultural familiar y sus experiencias en otras escuelas o con otros docentes.


Debe tenerse siempre presente que el aprendizaje y el logro educativo de los estudiantes dependen tanto de lo que hacen las escuelas y docentes, como del esfuerzo de los propios estudiantes, del apoyo de las familias a la tarea escolar, del contexto comunitario y cultural y de las políticas educativas. Los problemas educativos no pueden ser resueltos apelando exclusiva ni principalmente a mecanismos de mercado.

Los resultados expresados en términos de rankings de escuelas deben ser mirados con precaución


La mayoría de rankings de escuelas transmiten una falsa imagen de ordenamiento. Una escuela puede ocupar el primer lugar y otra el número 40 y, sin embargo, las diferencias entre sus promedios pueden no ser estadísticamente significativos. Esto significa que no puede decirse si un promedio es realmente superior al otro, porque las diferencias entran dentro de los márgenes de error de la medición. Pero aun cuando las diferencias en los promedios sean estadísticamente significativas, pueden ser irrelevantes en términos de las proporciones de alumnos que logran los niveles de desempeño esperados.


Itinerario para la toma de decisiones
Considerando las alternativas existentes para una política de evaluación, antes de poner en marcha un sistema de evaluación (o de modificar uno existente) es indispensable seguir un itinerario de decisiones para definir las características del sistema que incluya al menos las siguientes preguntas básicas:

  • ¿Para qué se quiere evaluar?
  • ¿Quiénes usarán los resultados y con qué propósitos?
  • ¿Qué se espera saber que no se sepa ya?
  • ¿Cuáles serán las unidades de análisis para el reporte de resultados: estudiantes individuales, grupo de clase/maestros, escuelas, tipos de escuela, entidades subnacionales, sistema educativo?
  • De acuerdo a los propósitos definidos, ¿qué es más apropiado evaluar –aprendizaje o logro educativo– al egreso de determinados grados o ciclos?
  • ¿Qué tipo de consecuencias tendrán los resultados y para quiénes?
  • De acuerdo a los propósitos definidos, ¿es necesario trabajar en forma censal o son suficientes evaluaciones en base a muestras?
  • ¿Qué grados y qué disciplinas es importante evaluar?
  • ¿Cada cuánto tiempo es necesario y adecuado realizar las evaluaciones?

Las respuestas a estas preguntas deberían plasmarse en un plan de evaluación a corto, mediano y largo plazo, claro y explícito. En la elaboración de dicho plan es muy importante considerar los costos en dinero implicados en cada opción y los recursos humanos necesarios para su adecuada implementación. En particular, se debe balancear la inversión a realizar en la recogida de información con la inversión en la difusión y uso de los resultados. Muchos Ministerios de Educación destinan importantes sumas de dinero a recoger una gran cantidad de información todos los años, que luego casi no se analiza, ni se difunde ni se utiliza. Es absolutamente inconducente implementar un primer operativo de evaluación si no se ha elaborado un plan de trabajo de largo plazo.

“Mandatos” útiles al momento de tomar decisiones políticas respecto al sistema de evaluación:

  • “No harás daño”. Una de las primeras normas del juramento hipocrático señala que el médico se abstendrá de todo aquello que pueda generar daño o perjuicio a sus pacientes. Del mismo modo, a la hora de pensar en un sistema de evaluación es importante considerar los riesgos de efectos no deseados y perjudiciales que la estrategia de evaluación diseñada podría tener sobre el propio sistema educativo que se desea mejorar.
  • “El consumo excesivo de este producto puede resultar perjudicial para la salud”. La evaluación no puede estar por encima de la educación. El exceso de evaluaciones puede producir perjuicios para la salud del sistema educativo, en especial si solo hay evaluaciones pero no hay políticas para dar respuesta a los problemas que estas ponen de manifiesto.
  • “El consumo exclusivo de este producto también puede resultar perjudicial para la salud”. La evaluación no produce mejoras por sí misma. Debe estar alineada con otro conjunto de elementos para que aquellas se produzcan. Se debe evitar la ingenuidad de pensar que evaluando mucho – y poco más que eso – se va a mejorar la educación.
  • “No evaluarás en vano”. Se debe evitar recoger todos los años información que nunca será analizada ni utilizada. Para que un sistema de evaluación tenga impacto, debe tener una periodicidad que garantice que los datos puedan ser analizados, discutidos, comprendidos y utilizados. Incorporar la nueva información y traducirla en decisiones y acciones lleva tiempo. Los cambios en el sistema educativo requieren más tiempo aun.
  • “Vísteme despacio Sancho, que estoy apurado”. Es muy importante que quienes toman las decisiones en los Ministerios de Educación desestimen la creencia ingenua en la existencia de caminos fáciles y rápidos. No es posible montar un programa de evaluación serio en tres meses. No existe coyuntura ni “ventana de oportunidad” que lo justifique: las consecuencias de la improvisación se harán sentir tarde o temprano. La evaluación requiere reflexión cuidadosa acerca de sus fines y usos; discusión pública sobre qué es lo fundamental a evaluar; diálogo e involucramiento de diferentes actores; conformación de equipos técnicos competentes en diversos aspectos; e información previa para que los actores se involucren con la evaluación.


Extraído de
http://rinace.net/riee/numeros/vol1-num1/art4_htm.html
Pedro Ravela, Patricia Arregui, Gilbert Valverde, Richard Wolfe, Guillermo Ferrer, Felipe Martínez Rizo, Mariana Aylwin y Laurence Wolff

jueves, 19 de marzo de 2009

Las Evaluaciones Educativas que América Latina Necesita II

2. LA SITUACIÓN DE LA EVALUACIÓN ESTANDARIZADA EN AMÉRICA LATINA
Los sistemas nacionales de evaluación estandarizada se desarrollaron con fuerza en toda la región durante los años 90. Algunos países han mantenido sus sistemas en funcionamiento con continuidad, aun cuando se produjeran cambios de enfoque o variaciones en la institucionalidad de los mismos. Otros países han tenido importantes discontinuidades y han tenido que comenzar prácticamente desde cero en repetidas oportunidades o tendrán que hacerlo en el futuro próximo. Además de ello, actualmente:

  • Dieciséis países están participando en el Segundo Estudio Regional en 3° y 6° de primaria que lleva adelante la OREALC/UNESCO: Argentina, Brasil, Chile, Colombia, Costa Rica, Cuba, Ecuador, El Salvador, Guatemala, México, Nicaragua, Panamá, Paraguay, Perú, República Dominicana y Uruguay.


  • Seis de estos países participan en PISA 2006 y otros tres se incorporarían al ciclo PISA 2009.


  • Algunos países de la región han participado además (o lo están haciendo) en los estudios de Matemática y Ciencias (TIMSS), Lectura (PIRLS) y Educación Cívica que lleva adelante la International Association for the Evaluation of Educational Achievement (IEA).


  • Durante los últimos 12 años ha estado activa en la región la red de los sistemas de evaluación organizada en torno al Laboratorio Latinoamericano de Evaluación de la Calidad de la Educación (LLECE) de OREALC/UNESCO, en la que participan actualmente casi todos los países latinoamericanos. Esta red se reúne dos veces al año y es un espacio de intercambio de experiencias y formación en el ámbito de la evaluación.


  • Más recientemente se ha constituido el Grupo Iberoamericano de PISA, integrado por Argentina, Brasil, Chile, Colombia, España, México, Portugal y Uruguay.

    Las evaluaciones a gran escala en la región no solo son más frecuentes sino también están mejorando
    Los principales cambios y mejoras que se observan en los últimos años incluyen:


  • Mayor transparencia en la difusión de los resultados. Parece haberse superado la etapa en que las autoridades en varios países interferían en la divulgación de los resultados de las evaluaciones cuando estos no les parecían favorables.


  • Tendencia creciente a pasar de pruebas normativas –que tienen como propósito principal ordenar comparativamente a los estudiantes– a pruebas de criterios, que se enfocan en qué es lo que los estudiantes saben y son capaces de hacer. Asimismo, crecientemente se incluye en las pruebas de criterios una definición de cuál es el resultado que todos los estudiantes deberían alcanzar para que su desempeño pueda ser considerado satisfactorio.


  • Mejoría de las capacidades técnico-metodológicas para la construcción de pruebas y para el procesamiento de los datos. Existen esfuerzos por desarrollar pruebas que evalúen un rango de conocimientos y capacidades más amplio y que incluyan preguntas de respuesta construida. Se han ido incorporando también metodologías más sofisticadas para el tratamiento de datos, como la Teoría de Respuesta al Ítem y el Análisis Multinivel.


  • Creciente atención a la difusión y uso de los resultados. Se ha ido comprendiendo que no basta con implementar una evaluación y publicar un informe, sino que es necesario desarrollar una estrategia de divulgación y un conjunto de reportes apropiados a cada una de las audiencias a las que se quiere llegar. Las Unidades de Evaluación tienen una mayor conciencia acerca de los usos apropiados e inapropiados para cada tipo de evaluación, aunque esto muchas veces no está suficientemente claro entre quienes toman decisiones de política.


  • Mayor preocupación por la investigación de los factores que inciden sobre los aprendizajes. Si bien falta mucho por hacer en términos metodológicos e interpretativos para producir buenos trabajos de investigación, en la mayoría de los países hay conciencia de que es preciso avanzar en la investigación y la construcción de hipótesis sobre cómo las dinámicas de la gestión de los sistemas educativos, los procesos escolares, las prácticas de enseñanza y las decisiones de política educativa influyen en las oportunidades de aprendizaje de los niños y niñas.


  • Creciente participación de los países evaluaciones internacionales. Esto ha tenido consecuencias positivas en las Unidades de Evaluación y en la calidad de su trabajo: ha contribuido a la construcción y acumulación de capacidad técnica en evaluación, ha facilitado el intercambio y el desarrollo de un lenguaje común entre países y ha ayudado a mejorar la calidad de diversos procesos técnicos (elaboración de pruebas, incorporación de preguntas de respuesta abierta, muestreo, control de las aplicaciones, análisis de datos, modos de difusión, entre otros).



Las principales debilidades presentes en los sistemas de evaluación estandarizada en la región se observan en la estrategia de difusión, en el uso de los resultados y en la calidad técnica de las evaluaciones
A pesar de las mejoras previamente mencionadas, persiste un conjunto importante de debilidades que es preciso abordar:





  • Es frecuente que desde el nivel político se demande la implementación de grandes operativos de evaluación sin propósitos claramente definidos y en tiempos y con recursos absolutamente insuficientes para hacerlo técnicamente bien.


  • Aún no se tiene claro que no cualquier evaluación sirve para cualquier propósito y que es necesario diseñar cuidadosamente el sistema de evaluación para el largo plazo, en función de propósitos y usos claramente establecidos. Esto es determinante para las decisiones relativas a la utilización de censos o muestras, a los grados y disciplinas que serán evaluados, la periodicidad de las evaluaciones, el tipo de pruebas y escalas de reporte, entre otras.


  • Falta una mayor discusión pública sobre qué debe ser evaluado y qué aspectos del currículo deben haber sido enseñados a todos los estudiantes al concluir determinados niveles educativos. Como resultado de ello, las metas y/o estándares de aprendizaje no son claros. Mientras no exista claridad al respecto, tampoco existirá claridad ni para la enseñanza ni para la evaluación. Esta tarea requiere de un amplio debate social y de un trabajo técnico coordinado entre las unidades de currículo y de evaluación.


  • Para mejorar la investigación sobre los factores que explican los resultados, falta mejorar mucho los instrumentos complementarios que se aplican junto con las pruebas y concebir diseños de investigación más ambiciosos: estudios longitudinales, estudios de “valor agregado” y estudios cualitativos, entre otros.


  • Los Ministerios de Educación han tenido, por lo general, una limitada capacidad para concebir, formular e implementar políticas que den respuesta a los problemas identificados en las evaluaciones. Falta para ello mayor articulación entre las Unidades de Evaluación y otros actores educativos relevantes, dentro y fuera de los Ministerios de Educación, y mayor articulación entre la evaluación, el desarrollo curricular, la formación inicial y el desarrollo profesional de los docentes.


  • Las acciones para la divulgación y uso de los resultados de las evaluaciones aún son insuficientes, en particular para lograr que los docentes los comprendan y utilicen y para que los resultados se incorporen a la cultura escolar.


  • En la mayoría de los países perdura la práctica de divulgar resultados de tipos de escuela, escuelas individuales, estados o provincias, sin una adecuada consideración de los contextos socioculturales en que operan las instituciones y subsistemas educativos. Esto conduce a interpretaciones y conclusiones erróneas sobre la eficacia educativa de dichas instituciones o subsistemas. Para ello es necesario realizar evaluaciones de “valor agregado”, que implican dos mediciones sobre una misma población en distintos momentos. Sobre este aspecto la experiencia en la región es mínima.


  • En muchos países persisten importantes debilidades técnicas en el diseño de las evaluaciones: excesiva simplicidad de la mayor parte de las preguntas y dificultad para elaborar preguntas que permitan evaluar capacidades cognitivas complejas; focalización de las evaluaciones en los logros educativos correspondientes a un grado específico, lo que impide saber qué han aprendido quienes aún no logran lo esperado para dicho grado; deficiencias en la conformación de las muestras y en la forma de estimar y reportar los errores de medición; y debilidades para establecer mediciones que sean comparables en el tiempo.


  • No hay suficientes profesionales calificados para diseñar y conducir este tipo de evaluaciones, lo que se agrava por la falta de continuidad de los equipos técnicos de los países, muchas veces por razones de índole político-partidaria. Esto dificulta la acumulación de conocimiento y experiencia en la región y ha dado lugar a que muchos países tengan que comenzar desde “cero” con sus sistemas de evaluación, algunos años después de haber tenido uno en funcionamiento y haberlo desmantelado.

El riesgo de las malas evaluaciones
Sólo una evaluación técnicamente buena y cuyos resultados sean conocidos y utilizados de manera apropiada, puede tener algún impacto en la mejora de los aprendizajes. Como es obvio, una evaluación cuyos resultados son poco conocidos y utilizados supone un ejercicio estéril y un desperdicio de recursos.
Más graves aún son aquellas situaciones en que evaluaciones técnicamente malas son ampliamente difundidas o en que las evaluaciones son empleadas para fines diferentes de aquellos para los cuales fueron concebidas y diseñadas, lo cual puede tener efectos dañinos para el sistema educativo. El razonamiento según el cual lo que importa es evaluar y difundir resultados como mecanismo de rendición de cuentas, sin importar la calidad de la evaluación, es una falacia que puede hacer retroceder los sistemas de evaluación e imposibilitar una discusión seria de las ventajas y desventajas de la rendición de cuentas o responsabilización por los resultados.




Recuperado de

http://rinace.net/riee/numeros/vol1-num1/art4_htm.html

Pedro Ravela, Patricia Arregui, Gilbert Valverde, Richard Wolfe, Guillermo Ferrer, Felipe Martínez Rizo, Mariana Aylwin y Laurence Wolff

Related Posts Plugin for WordPress, Blogger...

Busca en mis sitios