Mostrando entradas con la etiqueta propósitos. Mostrar todas las entradas
Mostrando entradas con la etiqueta propósitos. Mostrar todas las entradas

domingo, 17 de julio de 2011

Propósitos de la lectura según PIRLS

Las Evaluaciones estandarizadas de Calidad Educativa tienen sentido, en la medida que sirvan para provocar mejoras, tanto en lo referente a políticas educativas, como en las instituciones escolares, y hasta, haciendo la correspondiente adaptación, el rendimiento en el aula. Por lo tanto, la confección de "rankings" de países no debería ser el motivo central, tal como lo piensan los medios de comunicación con otros fines. El siguiente artículo explica qué evalúa la prueba PIRLS.

Propósitos de la lectura
La competencia lectora está directamente relacionada con las razones por  las que las personas leen. A grandes rasgos, estas razones abarcan la lectura para uso y disfrute personal, la lectura para la participación en sociedad y la lectura para el aprendizaje. En el caso de los lectores de corta edad, el énfasis se sitúa en la lectura para uso y disfrute personal y la lectura para el aprendizaje.

El estudio PIRLS de competencia lectora se centrará en dos de los propósitos que responden a la mayor parte de la lectura realizada por alumnos de corta edad dentro y fuera del ámbito escolar:
La lectura como experiencia literaria; y
La lectura para adquisición y uso de información

Dado que ambos tipos de lectura son importantes a esta edad, el estudio PIRLS contiene una proporción idéntica de material de evaluación para cada uno de los propósitos. Aunque el estudio distingue los dos propósitos de la lectura, los procesos y estrategias que los lectores utilizan para ambos propósitos acaso guarden más similitudes que diferencias.

Cada  uno de estos propósitos de la lectura suele asociarse con ciertos tipos de textos. Por ejemplo, la lectura como experiencia literaria con frecuencia se lleva a cabo a través de la lectura de ficción, mientras que la lectura para adquisición y uso de información se asocia por  lo general a los artículos informativos y textos instructivos. Sin embargo, los propósitos de la lectura no se alinean estrictamente con tipos de textos determinados. Por ejemplo, las biografías o autobiografías pueden ser primordialmente informativas o literarias, pero incluyen características de ambos propósitos de la lectura. Debido a que los gustos e intereses de las personas son tan variados, casi cualquier texto podría responder a cualquiera de los propósitos.

El contenido, la organización y el estilo que pudieran ser característicos de un género de texto en particular influyen en la manera en la que el lector aborda la comprensión del texto (Graesser, Golding y Long,  2000; Kirsch y Mosenthal, 1989; Weaver y Kintsch, 1996).  Es en la interacción entre el lector y el texto donde se generan los significados y se logran los propósitos. En la prueba PIRLS, los textos se clasificarán conforme a su propósito principal y a los tipos de preguntas formuladas. Es decir,  los textos clasificados como informativos irán  acompañados de preguntas sobre la información contenida en los textos, y los clasificados como literarios tendrán preguntas referentes al tema, acontecimientos de la trama, personajes y ambientación.

Las primeras lecturas de la mayoría de niños se centran en textos de tipo literario y narrativo, sin embargo, a muchos lectores de corta edad también les gusta adquirir información a partir de libros  y otros tipos de material de lectura. Esta clase de lectura va adquiriendo mayor importancia a medida que los alumnos desarrollan sus habilidades lectoras y, de forma progresiva, se les exige que lean para aprender en las diferentes áreas y materias curriculares (Langer, 1990).

Es posible identificar numerosos tipos de textos que respondan a uno u otro propósito de la lectura. Los textos difieren en la manera en la que las ideas se organizan y se presentan, y suscitan modos diversos de generar significado (Goldman y Rakestraw, 2000).  La organización y el formato del texto pueden variar en gran medida, y van desde la ordenación secuencial del material escrito a retazos de palabras o frases dispuestos junto con información gráfica y tablas.

Al seleccionar los textos para la evaluación PIRLS, el objetivo consiste en presentar una amplia gama de tipos de texto que responda a cada uno de los propósitos de la lectura. Los textos serán seleccionados únicamente a partir de fuentes representativas de las disponibles para los alumnos dentro y fuera del ámbito escolar. La finalidad es crear una experiencia lectora para los alumnos participantes en la prueba que, en la medida de lo posible, sea similar  a experiencias lectoras auténticas que puedan tener en otros contextos.

Los dos propósitos de la lectura y los diferentes tipos de textos incluidos en cada propósito se describen en los apartados siguientes.

La lectura como experiencia literaria
En la lectura literaria, el lector se vale del texto para implicarse en acontecimientos, entornos, acciones, consecuencias, personajes, ambientes, ideas y sentimientos ficticios,  y para disfrutar del lenguaje en sí. Con objeto de entender y apreciar la literatura, el lector debe trasladar al texto sus propias experiencias, sentimientos, apreciación del lenguaje y conocimientos de las formas literarias. Para  los lectores de corta edad, la literatura ofrece la oportunidad de explorar situaciones y sentimientos con los que aún no se han encontrado. La forma principal de textos literarios empleada en el estudio PIRLS es la ficción  narrativa. Dada la diversidad curricular y cultural de los países participantes, la inclusión de ciertos tipos de textos literarios conlleva ciertas dificultades. Por ejemplo, la traducción de la poesía resulta laboriosa y en cuanto a las obras teatrales, no en todos los casos se enseñan en los cursos  de educación primaria.

Los acontecimientos, acciones y consecuencias descritos en la ficción narrativa permiten al lector ponerse en el lugar del otro y reflexionar sobre situaciones que, aunque sean producto de la fantasía, iluminan las de la vida real.  Es posible que el texto presente la perspectiva del narrador o de un personaje principal, o que se den puntos de vista diversos si el texto es más complejo. La información y las ideas pueden ser descritas directamente o a través del diálogo y los acontecimientos.

Los relatos cortos y las novelas narran a veces acontecimientos por  orden cronológico, y otras veces hacen un uso más complejo del tiempo con escenas retrospectivas o cambios en el plano temporal.

La lectura para adquisición y uso de información
Al leer  para adquirir información, el lector no se ve inmerso en mundos de fantasía, sino en aspectos del universo real.  A través de textos informativos, es posible entender cómo es el mundo y cómo ha sido, y por  qué las cosas funcionan de la manera que lo hacen. Los lectores pueden ir más allá de la adquisición de información y utilizarla para practicar el razonamiento y la acción. No es necesario leer  los textos informativos de principio a fin; los lectores pueden seleccionar las partes que necesiten. Las diversas organizaciones de los textos ejercen diferentes demandas sobre el lector, aunque no suelen darse distinciones rigurosas. También cabe resaltar que, a pesar de su organización, los textos informativos pueden o no contar con encabezamientos u otro tipo de organizadores textuales.

Los textos informativos ordenados cronológicamente presentan sus ideas como una secuencia ordenada en el tiempo. Estos textos pueden relatar acontecimientos, por  ejemplo, en forma de hechos históricos, anotaciones en un diario, informes personales o cartas. Las biografías y autobiografías, que detallan los acontecimientos de vidas reales, son importantes textos de este tipo. Otros textos cronológicamente organizados son de carácter procedimental, como las recetas de cocina y las instrucciones. En este caso,  a menudo se emplea la forma del imperativo y se espera que el lector, además de entender, actúe de acuerdo con lo que lee.

A veces,  la información y las ideas se organizan a partir de la lógica más que de la cronología. Por ejemplo, un documento de investigación puede describir causa y efecto, los artículos periodísticos pueden comparar y contrastar asuntos tales como las sociedades o el tiempo atmosférico, y los editoriales pueden presentar argumentos a favor y en contra o plantear una opinión aportando pruebas. Los textos persuasivos apuntan directamente a influir en la opinión del lector, como es el caso de la presentación de un problema y la consiguiente solución recomendada. Tanto en la argumentación como en la persuasión, el lector debe seguir el desarrollo de las ideas y acercarse al texto con mente crítica  para formar su propia opinión.

En ocasiones, los textos informativos son de carácter expositivo y presentan explicaciones o bien describen personas, acontecimientos o cosas.  En una organización temática, los aspectos de un tema se agrupan y se describen juntos en el texto. Finalmente, debe tenerse en cuenta que la información no tiene por  qué presentarse en textos continuos. Entre los textos discontinuos se incluyen folletos, listas,  diagramas, cuadros, gráficos, y todos aquellos que llaman a la acción por  parte del lector, tales como anuncios publicitarios o boletines informativos. Conviene subrayar que un único texto informativo a menudo utiliza una o más maneras de presentar la información. Incluso  los fragmentos informativos que son en su mayoría texto, con frecuencia están documentados con tablas o acompañados de ilustraciones y diagramas.


Extraído de
Marcos teóricos y especificaciones de evaluación de PIRLS 2006
Autores: Ina V.S. Mullis, Ann M. Kennedy, Michael O. Martin y Marian Sainsbury.
TIMSS & PIRLS International Study Center
Lynch School of Education, Boston College

miércoles, 3 de febrero de 2010

Examen PISA


PISA ¿Qué es PISA? PISA en México Elaboración de Reactivos Wenceslao Verdugo Rojas

PISA: programme for international student assessment

Programa para la Evaluación Internacional de Alumnos

Se trata de un proyecto de la OCDE, organización internacional inter gubernamental que reúne a los países mas industrializados de economía de mercado.

30 países: 23 de Europa, 3 América del Norte, y 4 del pacifico, su sede París

Participación en PISA

Países miembros de la OCDE

30 países: 23 de Europa, 3 de América del Norte y 4 del Pacífico. Tiene su sede en París

I



 

 

INICIOS…..

Primer ciclo se aplico en el 2000, en un total de 43 países, (32 iniciales mas otros 11 invitados)

El segundo ciclo en el 2003 abarco a 41 países

El tercer ciclo en el 2006, 57 países

La última en Marzo 2009.

PRETENDE

Impulsar el crecimiento de la economía y empleo

Promover el bienestar económico y social mediante la coordinación de políticas entre los países miembros

Estimular y armonizar esfuerzos para el desarrollo de otros países

OBJETIVO Y PROPOSITOS

Evaluar hasta que punto los alumnos aprenden y adquieren conocimientos en la educación obligatoria para enfrentarse a la sociedad del saber

Evaluar que tan bien preparados están los estudiantes para enfrenar los retos del futuro, si son capaces de analizar, razonar y comunicar sus ideas efectivamente, si tienen la capacidad de seguir aprendiendo durante toda la vida

La universalidad del examen realizadas cada tres años

El último se realizó en 2009, utilizando pruebas referidas a las áreas de lectura, matemáticas y ciencias.

Dedicado a alumnos de 15 años, no a un grado de escolaridad

Se usan muestras representativas de estudiantes (4,500 a 10,000) de un mínimo de 150 escuelas

Programa orientado a la política educativa

Evalúa comprensión lectora, matemáticas y ciencias

No sólo mide las áreas nombradas anteriormente sino que se tiene en cuenta lo siguiente:

motivación de los alumnos

auto concepción

estrategias de aprendizaje

Prueba realizada para formar al alumno en su inserción laboral y su vida adulta.

Importancia de las tres áreas mencionadas para la formación del individuo.

Evalúa también las circunstancias sociales, económicas, personales, familiares del alumno.

Necesario para la discusión de la educación.

Mejora o reforma de política educativa.

PISA Elaboración de Reactivos

Teorías generales Teoría clásica del test y Teoría de Respuesta al ítem

Descripción de competencias LECTURA NIVEL 5. En este nivel los estudiantes son capaces de completar reactivos de lectura sofisticados, tales como los relacionados con el manejo de información difícil de encontrar en textos con los que no están familiarizados; mostrar una comprensión detallada de dichos textos e inferir qué información del texto es relevante para el reactivo; así como evaluar críticamente y establecer hipótesis.

Descripción de competencias LECTURA NIVEL 4. Los estudiantes son capaces de responder reactivos de lectura difíciles, tales como: ubicar información anidada, interpretar significados a partir de sutilezas del lenguaje y evaluar críticamente un texto.

Descripción de competencias LECTURA NIVEL 3. Los estudiantes que dominan el nivel 3 de la escala, son capaces de manipular reactivos de lectura de complejidad moderada, tales como ubicar fragmentos múltiples de información, vincular distintas partes de un texto y relacionarlo con conocimientos familiares cotidianos. .

Descripción de competencias LECTURA NIVEL 2. Los estudiantes que dominan el nivel 2 de la escala, son capaces de responder reactivos básicos de lectura, tales como ubicar información directa, realizar inferencias sencillas de distintos tipos, determinar lo que significa una parte bien definida de un texto, y emplear cierto nivel de conocimientos externos para comprenderla.

Descripción de competencias LECTURA NIVEL 1. Los estudiantes que dominan este nivel son capaces de realizar sólo los reactivos de lectura menos complejos que se han desarrollado para PISA, como ubicar un fragmento de información, identificar el tema principal de un texto o establecer una conexión sencilla con el conocimiento cotidiano.

Descripción de competencias MATEMÁTICAS NIVEL 3. Hacia el nivel más alto, los estudiantes normalmente toman una postura activa y creativa en su acercamiento a los problemas matemáticos. Así, interpretan y formulan problemas en términos de matemáticas, son capaces de manejar la información más compleja y de negociar una serie de pasos de procesamiento. Muestran otros procesos cognoscitivos de alto nivel tales como generalización, razonamiento y argumentación para explicar y comunicar resultados.

Descripción de competencias MATEMÁTICAS NIVEL 2. En este nivel de la escala, los estudiantes suelen ser capaces de interpretar, vincular e integrar representaciones distintas de un problema o diferentes fragmentos de información; manipular y emplear un modelo dado, que a menudo involucra el uso de álgebra u otras representaciones simbólicas; así como trabajar con estrategias, modelos o proposiciones dadas.

Descripción de competencias MATEMÁTICAS NIVEL 1. En el extremo bajo de la escala, los estudiantes son generalmente capaces de completar solamente un paso de procesamiento, el cual consiste en la reproducción de elementos matemáticos básicos o en aplicar habilidades simples de cálculo. Cualquier interpretación o razonamiento, casi siempre involucra el reconocimiento de un elemento familiar en el problema. La solución requiere de la aplicación de procedimientos rutinarios en un solo paso de procesamiento.

Descripción de competencias CIENCIAS NIVEL 3. Los estudiantes son capaces de crear o emplear modelos conceptuales para hacer predicciones o dar explicaciones; son capaces de analizar investigaciones científicas con objeto de comprender, por ejemplo, el diseño de un experimento o de identificar una idea que se está poniendo a prueba. Comparan datos con el fin de evaluar puntos de vista alternativos o perspectivas distintas, y comunican argumentos científicos o descripciones detalladas y precisas.

Descripción de competencias CIENCIAS NIVEL 2. Los alumnos son normalmente capaces de emplear los conceptos científicos para hacer predicciones o dar explicaciones; de reconocer preguntas que pueden ser respondidas mediante la investigación científica o identificar detalles de lo que está involucrado en una investigación científica y; seleccionar información relevante entre datos que compiten o cadenas de razonamiento para obtener o evaluar conclusiones.

Descripción de competencias CIENCIAS NIVEL 1. En el extremo bajo de la escala, los estudiantes son capaces de recordar conocimientos científicos simples (como nombres, datos, terminología, reglas sencillas) y; emplear el conocimiento científico común para obtener o evaluar conclusiones.

Descripción de competencias CIENCIAS NIVEL 1. En el extremo bajo de la escala, los estudiantes son capaces de recordar conocimientos científicos simples (como nombres, datos, terminología, reglas sencillas) y; emplear el conocimiento científico común para obtener o evaluar conclusiones.

Definición del marco de referencia de los dominios de evaluación La función del marco de referencia es dirigir las evaluaciones de PISA. En éste se defi ne cada dominio, describe el alcance de la evaluación, el número de reactivos que se necesitan para medir cada componente del dominio, determina el balance de los tipos de preguntas y bosqueja el tipo de reporte de resultados.

Desarrollo de pruebas El grupo responsable para el desarrollo de las pruebas se integra por personal del Australian Council for Educational Research (ACER) y de CITI Group, además participan miembros de los FEGs (functional expert groups), traductores y revisores de reactivos de los centros nacionales, quienes contribuyen sustancialmente al proceso para el desarrollo de las pruebas. Abarca las siguientes actividades:

Desarrollo de pruebas a) Convocatoria para el diseño de reactivos. El consorcio convoca a los países participantes a enviar reactivos, de acuerdo con las guías elaboradas ex profeso . b) Diseño de reactivos y revisión técnica y de congruencia. El grupo encargado del diseño de las pruebas revisa los reactivos enviados por los países y se asegura que sean consistentes con el marco de referencia, y que técnicamente estén bien diseñados. c) Revisión de reactivos por un grupo de expertos. El proceso de revisión se realiza, primero por parte de expertos, después en los países participantes, y finalmente, por los FEGs de cada dominio.

Desarrollo de pruebas Se preparan dos tipos de materiales para el calificador: la Guía de Calificación y el Manual de Capacitación de cada dominio. La guía incluye la forma de asignar los códigos a las respuestas, y el manual sirve para ejercitar a los calificadores en su tarea de asignación de códigos.

Desarrollo de pruebas Prueba piloto, selección, revisión técnica y de expertos de los reactivos para el estudio; y revisión cultural. En promedio, cada reactivo es respondido por 150 ó 200 estudiantes por país en la prueba piloto. La revisión y selección de los reactivos para la prueba definitiva es realizada por los revisores nacionales, el grupo de diseño de la prueba, los FEGs, y el grupo de expertos encargado de la revisión cultural de los reactivos.

Desarrollo de pruebas La conformación del banco de reactivos e integración de pruebas. El banco de reactivos de las pruebas almacena y permite la selección de los reactivos. Después de la prueba piloto, se obtiene y captura la información estadística de los reactivos, como los índices de dificultad y de discriminación.

Normas para la construcción de reactivos Generales Los reactivos deben corresponder al contenido y nivel taxonómico asignados en la tabla de referencia. Los reactivos deben apegarse a la información fuente, así como a la ciencia o disciplina científica de que se trate. Los reactivos deben presentar un problema bien definido, es decir, incluir todos los elementos necesarios y suficientes para la solución del mismo.

Normas para la construcción de reactivos Generales Los reactivos deben incluir estrictamente los elementos necesarios para comprender adecuadamente el problema planteado. Los reactivos deben tener coherencia gramatical. Los reactivos deben ser independientes entre sí, para evitar que unos ayuden a contestar otros. necesarios y suficientes para la solución del mismo.

Normas para la construcción de reactivos Generales Las respuestas de los reactivos no deben ser condición para resolver el (los) siguiente(s) reactivo(s). Deben redactarse en términos sencillos, claros y precisos, considerando el lenguaje empleado en las fuentes de información y/o el lenguaje propio del nivel y grado educativos..

Normas para la construcción de reactivos Generales No deben formularse con la misma redacción utilizada en las fuentes de información, excepto cuando se trate de leyes y definiciones, los cuales deben entrecomillarse. Cuando en una prueba se incluya textualmente un escrito, se debe anexar la fuente para verificar que se ha respetado fielmente el original. Si el texto proporcionara pocos elementos para construir un reactivo, es conveniente usar sinónimos comunes.

Normas para la construcción de reactivos Generales No deben involucrar, de manera irónica, nombres de funcionarios e instituciones públicas. La respuesta de cada reactivo debe anotarse en la plantilla de claves o en el cuadro de respuestas y en la tarjeta reactivo.

Normas para la construcción de reactivos Generales Deben plantearse en forma afirmativa. No deben incluirse marcas de productos y/o circunstancias que fomenten el consumismo y los vicios. No debe incluir nombres de personajes ficticios empleados en los medios masivos de comunicación .

Normas para la construcción de reactivos

Finalmente comentar que los reactivos pueden ser:

De opción múltiple

De complementación o respuesta breve

De respuesta alterna (falso - verdadero; Sí – No)

De jerarquización u ordenamiento

De apareamiento o correspondencia

Video debate

martes, 24 de marzo de 2009

Las Evaluaciones Educativas que América Latina Necesita III

LOS PROPÓSITOS Y LOS USOS DE LOS RESULTADOS DE LAS EVALUACIONES ESTANDARIZADAS
Sea en la implementación de un sistema de evaluación o en su reforma, es necesario considerar algunas opciones básicas de acuerdo a lo que se espera de él.

El primer paso es definir cuál será el propósito del sistema de evaluación y para qué se usarán sus resultados

Es preciso considerar diversas opciones, que no son necesariamente excluyentes. Un sistema puede combinar varias de ellas, pero es importante tener conciencia de que cada opción requiere de un determinado diseño y tiene exigencias técnicas y de costos diferentes. Se debe analizar si el sistema nacional de evaluación será:
  • de carácter diagnóstico (para alumnos, escuelas o sistema educativo), sin consecuencias directas para los estudiantes, cuya finalidad principal es enriquecer con información de calidad las percepciones, decisiones y acciones de diversos actores del sistema –autoridades y cuerpos técnicos, supervisores, directivos, docentes, estudiantes y sus familias– para mejorar la enseñanza y el aprendizaje.
  • de certificación de los logros educativos de los estudiantes, cuyo propósito central es establecer quiénes han alcanzado los conocimientos y desempeños necesarios para aprobar un curso o nivel y, en consecuencia, aprueba o reprueba.


Es necesario también establecer un adecuado balance entre la implementación de pruebas nacionales y la participación en pruebas internacionales


Las pruebas nacionales pueden ofrecer una mirada más apropiada acerca de qué aprenden los estudiantes de aquello que se les está enseñando, mientras que las pruebas internacionales pueden servir para ubicar la situación del país en relación a lo que saben y son capaces de hacer los estudiantes en otras sociedades y enriquecer el debate sobre el currículo nacional y el enfoque de la enseñanza. Los países deberían analizar cuidadosamente en qué pruebas internacionales participar, teniendo en cuenta lo que cada una pretende evaluar y su pertinencia en relación a los objetivos nacionales. Parece recomendable participar periódicamente en al menos una evaluación regional o internacional, en el marco de la política de prioridades que cada país defina.


Evaluaciones para la certificación de los aprendizajes de los estudiantes

Un sistema de evaluación para certificar los aprendizajes de los estudiantes a través de exámenes nacionales de alta calidad técnica tiene ventajas asociadas a la transparencia y responsabilidad por los resultados


Hoy es común que dos estudiantes que han aprobado un mismo nivel educativo en dos regiones distintas de un país, posean en realidad niveles de conocimiento muy diferentes. Los sistemas de evaluación para la certificación dan transparencia al valor de los certificados educativos ante la sociedad. Además, dichos sistemas hacen responsables tanto a los docentes como a los propios estudiantes por alcanzar los conocimientos y capacidades que evalúa el examen, lo cual tiene impactos positivos sobre el aprendizaje. En todo caso, la evaluación externa con propósitos de certificación es más apropiada para los ciclos superiores del sistema educativo, sobre todo hacia el final de la educación media.


Un sistema de evaluación para la certificación implica algunos requerimientos que son costosos


Por una parte, las pruebas deben ser de carácter censal y cada estudiante debe tener más de una oportunidad para rendirla, lo cual requiere implementar varios operativos de evaluación cada año. Por otra parte, las pruebas deben tener una amplia cobertura curricular, lo cual requiere que sean extensas, en lo posible con preguntas de respuesta construida (que tienen un importante costo de codificación) y deben abarcar varias asignaturas o disciplinas.


Un sistema de evaluación para la certificación puede generar tensiones importantes que es necesario anticipar

Si las pruebas son exigentes, ello puede conducir a niveles de reprobación muy altos, que afectarían principalmente a los sectores sociales más vulnerables y podrían agudizar problemas como la deserción y el desempleo juvenil, lo cual las haría insostenibles desde el punto de vista social y político. Por ello, es preciso acompañar este tipo de evaluaciones (en realidad todo tipo de evaluaciones, pero estas en particular) con acciones pedagógicas de carácter complementario y compensatorio. Proponer estándares altos implica asumir responsabilidad sistémica por proporcionar todas las oportunidades para aprender: textos, materiales, instalaciones y preparación de maestros, entre otros. Existen diversos caminos para enfrentar este problema:

  • Establecer que la evaluación estandarizada constituya solo una parte del proceso de certificación de aprendizajes de los estudiantes (por ejemplo, el 40% de su calificación final). El resto de la nota correspondería a las evaluaciones que realizan los docentes a cargo de los estudiantes. Si bien en este caso se mantiene el problema respecto a la heterogeneidad de los criterios de evaluación empleados por los docentes, es una forma de combinar la evaluación externa y la interna, e incluso de aportar a los docentes una mirada externa que les permita reflexionar sobre sus propios criterios.
  • Establecer un periodo de transición hacia estándares únicos y universalmente aplicables. Durante dicho período, el foco principal se centra en la mejoría o progreso de los estudiantes de cada escuela respecto a su situación anterior, y no únicamente en el cumplimiento del estándar absoluto de certificación.


La peor respuesta que podría darse a este problema sería establecer un porcentaje fijo de reprobación, por ejemplo, no debe reprobar más del 10% de los estudiantes. Ello implica utilizar pruebas más fáciles y, por lo tanto, enviar a estudiantes, familias y educadores una señal equivocada respecto a las expectativas de aprendizaje.


Evaluaciones de carácter diagnóstico y formativo


Un sistema de evaluación de tipo formativo y sin consecuencias directas para los estudiantes tiene ventajas en términos de costos, posibilidades de diseño y de establecimiento de estándares altos, y aporte a una cultura de evaluación


Los costos de aplicación de estas pruebas pueden ser menores, dado que pueden hacerse en base a muestras y aplicarse solo en algunos grados claves y cada cierto número de años. Por otra parte, las pruebas pueden diseñarse con carácter matricial, en que no todos los estudiantes responden a las mismas preguntas sino a bloques de las mismas, lo cual permite trabajar con una cantidad muy grande de preguntas y obtener un análisis más detallado de los distintos aspectos del currículo. Estos sistemas permiten definir estándares o niveles de expectativa exigentes sin que ello produzca un fracaso generalizado. Asimismo, ayudan a construir una cultura de la evaluación y a acumular capacidad técnica, de modo que, cuando se analice la posibilidad de establecer un sistema con consecuencias, existan las condiciones para hacerlo apropiadamente. Una de las alternativas a considerar entre los usos de carácter formativo es la de “liberar” una prueba completa para que sea aplicada en forma autónoma por parte de los maestros, con el fin de ayudarles a identificar dificultades de alumnos individuales y de enriquecer su repertorio de instrumentos de evaluación.


El principal problema de estas evaluaciones es que pueden carecer de impacto si no se toman algunas acciones complementarias


Las evaluaciones de carácter diagnóstico y formativo pueden resultar intrascendentes si no van acompañadas de una estrategia precisa y de una inversión importante para asegurar la divulgación de los resultados y su uso en acciones educativas posteriores, puesto que su efectividad se juega en que los diferentes actores reciban, comprendan y utilicen los resultados. Por esto hay que tener presente que:

  • Para que los resultados de este tipo de evaluaciones tengan impacto sobre las políticas educativas, se debe invertir tiempo en el análisis y discusión de los mismos por parte de diversas áreas del Ministerio de Educación y otros actores relevantes, en la comprensión de los problemas y deficiencias que los resultados ponen de manifiesto y en la concepción de acciones e inversiones apropiadas para hacerles frente. Las autoridades deben estar dispuestas a someter sus políticas y decisiones al escrutinio de la ciudadanía, para lo cual es necesario también invertir en la comunicación apropiada y permanente de los resultados a la opinión pública.
  • Para que los resultados tengan impacto sobre las prácticas de enseñanza, es imprescindible asimismo invertir tiempo en el análisis e interpretación de sus implicancias didácticas: si los estudiantes no son capaces de resolver cierto tipo de situaciones, ¿qué es lo que se está haciendo de manera insuficiente o inapropiada en las aulas y qué es lo que se debería hacer? Este tipo de análisis debe ser realizado tanto por especialistas en la didáctica de las áreas evaluadas como por los docentes, creando para este último efecto espacios permanentes y sistemáticos de formación en servicio y de trabajo colectivo al interior de las escuelas. Es muy importante que los maestros puedan analizar la mayor cantidad posible de ítemes para poder identificar cuáles revelan un bloqueo importante para el desarrollo de nuevos conceptos o capacidades. Sin embargo, siempre será necesario conservar el carácter confidencial de una parte de los ítems para poder realizar mediciones comparables en el tiempo.
  • Para que los resultados tengan impacto sobre la motivación de los estudiantes y sobre la actitud de las familias hacia el aprendizaje escolar, es necesario proveerles de información apropiada y comprensible acerca de lo que se considera imprescindible haber aprendido en cada grado o nivel educativo y de las acciones que pueden contribuir al logro de dichos aprendizajes.

Evaluar con una perspectiva ampliada

Es muy importante que las pruebas no se limiten a evaluar los conocimientos y competencias correspondientes a un único grado (aquel en que se aplica la evaluación), sino que incluyan una perspectiva más amplia de niveles de desempeño –desde más básicos a más complejos– a lo largo de varios grados, de modo de identificar qué han aprendido los estudiantes en grados anteriores y qué necesitan ahora. De este modo, los docentes podrán constatar y subsanar las deficiencias en los aprendizajes de cursos previos, que impiden a los estudiantes continuar avanzando y los resultados serán útiles no sólo para los docentes del grado evaluado, sino también para los de grados anteriores. El énfasis no estará puesto en comunicar a los docentes que los estudiantes “aprueban” o “desaprueban”, sino en comunicar que están en diferentes puntos de un continuo de aprendizaje, en el que todos pueden y necesitan progresar.


Las pruebas de tipo diagnóstico pueden tener carácter muestral o censal, dependiendo de la estrategia de cambio educativo

El carácter censal o muestral tiene diversas implicancias, aunque también es posible combinar una aplicación por muestras controlada con una distribución censal de las pruebas para su aplicación en forma autónoma por parte de las escuelas, con fines formativos y de análisis de resultados e identificación de estudiantes que necesitan apoyos complementarios.

  • Las pruebas a base de muestras sirven para tener un diagnóstico global del sistema. Requieren de un cuidadoso diseño de la muestra, de modo de obtener información representativa para los niveles de desagregación en los que se desee actuar y tomar decisiones (regional, provincial, municipal; urbano y rural; escuelas indígenas, etc.). El impacto de los resultados de estas pruebas depende principalmente de las medidas de política educativa que se tomen a nivel central y de una estrategia de difusión apropiada que llegue a todas las escuelas.
  • Las pruebas censales sirven para obtener información de cada una de las escuelas e incluso de los alumnos. El impacto de sus resultados depende de la devolución de la información a cada comunidad educativa, con un enfoque y un formato adecuados para promover una mayor participación y compromiso a nivel local. La información también puede resultar muy útil para dirigir mejor las políticas hacia distritos o escuelas con mayores problemas, ya que se puede contar con un “mapa” de resultados de todas las escuelas, zonas, provincias, tipos de escuela, etc.


Uso de las evaluaciones para establecer incentivos
Además de las opciones examinadas, existen políticas de evaluación estandarizada dirigidas a establecer incentivos económicos en función de los resultados o a propiciar un mercado competitivo entre las escuelas


Tres son las principales modalidades en este tipo de políticas:

  • Utilizar los resultados para construir rankings de escuelas y hacerlos públicos, como forma de: fomentar la responsabilidad de las escuelas por sus resultados; entregar a las familias información para la toma de decisiones sobre la escuela a la cual enviar a sus hijos; promover la competencia entre los centros educativos por obtener mejores resultados.
  • Utilizar los resultados para entregar incentivos económicos a las escuelas que obtienen mejores resultados o mejoras en relación a sus resultados en evaluaciones anteriores.
  • Utilizar los resultados como indicador de la calidad del trabajo de cada docente y como criterio para otorgar incentivos económicos.

Estos enfoques de uso de la evaluación a veces se constituyen, con o sin intención deliberada, en un mecanismo por el cual el Estado renuncia a su responsabilidad por los resultados del sistema educativo


En ocasiones, el Estado limita su accionar a la realización de evaluaciones, la entrega de resultados y el establecimiento de incentivos en función de estos resultados, transfiriendo la responsabilidad por los resultados a la relación entre escuelas y familias, como si se tratase de un asunto entre actores privados, en lugar de ocuparse de crear las condiciones para que la enseñanza resulte efectiva proveyendo los recursos necesarios, constituyendo un elenco docente adecuadamente formado y estableciendo mecanismos idóneos para la evaluación y la orientación de la labor de las escuelas. Este modo de operar no considera la complejidad de la labor educativa, en especial en medios socialmente desfavorecidos, y la necesidad de invertir en la creación de capacidades como herramienta principal para la mejora de la enseñanza y el aprendizaje.


Criterios básicos para la divulgación y uso de los resultados
La responsabilidad por los resultados debe ser compartida por diversos actores
Debería evitarse todo uso de los resultados con el fin deliberado o implícito de culpabilizar o responsabilizar de manera exclusiva a ciertos actores. La responsabilidad debe ser compartida entre las autoridades nacionales y regionales, los cuerpos docentes, los estudiantes y sus familias.


La responsabilidad por los resultados requiere de una adecuada combinación entre las exigencias y los apoyos a las escuelas y a los docentes


Por un lado, es necesario que escuelas y docentes asuman su responsabilidad respecto al objetivo de que todos los estudiantes aprendan lo que se espera de ellos. Simultáneamente, es deber de las autoridades establecer las políticas de apoyo necesarias para que escuelas y docentes puedan desarrollar su labor de manera apropiada. Un esquema de exigencias altas sobre escuelas y docentes sin los correspondientes apoyos solo puede generar malestar y desánimo. Un esquema de apoyos sin contrapartes y exigencias puede generar autocomplacencia.
Es inapropiado utilizar los resultados de las pruebas estandarizadas como indicador principal de la calidad del trabajo del docente o de la escuela


Esto es importante, en particular si no se ha controlado el efecto de otros factores internos y externos al sistema educativo y si no se tiene en cuenta que el aprendizaje depende también de la motivación y esfuerzo personal del estudiante. Además, dado que los resultados de pruebas estandarizadas no son el único indicador de la calidad de la educación, es preciso considerarlos en conjunto con otros aspectos relevantes como la retención, la pertinencia y relevancia de lo que se enseña, la formación de valores y hábitos o la formación ciudadana. Debe evitarse la identificación del término “calidad” con resultados de pruebas estandarizadas.


Para facilitar la comprensión y uso de los resultados, no basta con ofrecer resultados numéricos


Es fundamental ilustrar a los distintos actores acerca del tipo de tareas que los estudiantes debieron resolver en las pruebas. Este criterio debe combinarse adecuadamente con la necesidad de mantener el carácter confidencial de un conjunto de preguntas, que puedan emplearse en futuras evaluaciones para establecer mediciones comparables en el tiempo. Si bien no se pretende que los docentes utilicen pruebas estandarizadas para evaluar a sus estudiantes, el conocimiento y la comprensión de las mismas pueden contribuir a mejorar sus modos de evaluar y a desarrollar una cultura de la evaluación.


Al reportar las diferencias de resultados en función de la composición sociocultural del alumnado de las escuelas, se debe cuidar de no crear un sistema de expectativas de logro diferenciado por grupos sociales
En todo caso, las diferencias deberían producirse en las políticas para crear condiciones apropiadas para enseñar a los grupos más desfavorecidos. Se debería descartar también cualquier tipo de uso de los resultados que, directa o indirectamente, propicie la selección de estudiantes por parte de las escuelas a los efectos de mejorar sus resultados.


Advertencias sobre la comparación de resultados entre escuelas
Aunque los resultados de pruebas estandarizadas no dan cuenta en forma exhaustiva de la calidad educativa de una escuela, sí aportan información relevante de los niveles de desempeño alcanzados


La información sobre resultados en dos pruebas estandarizadas –en general, lenguaje y matemática– no constituye por sí misma una evaluación de la “calidad educativa” de las escuelas ni debería presentarse al público como tal. La “calidad” de una escuela incluye otros aspectos relevantes y valorados por los docentes, estudiantes y familias, tales como el desarrollo emocional, las relaciones interpersonales, la formación cívica y en valores, entre otros. Aun así, la información comparativa acerca de los niveles de desempeño alcanzados por los estudiantes en una diversidad de escuelas puede ser relevante para los equipos docentes de las escuelas, en la medida en que enriquece la percepción de la propia labor, permitiéndoles ubicar los logros de sus estudiantes en el contexto de los alcanzados por los estudiantes en otras escuelas.


Para que la comparación entre los niveles de desempeño de los estudiantes sea apropiada, se deben considerar sus condiciones sociales de origen


Los resultados académicos de las escuelas deberían poder compararse con los de escuelas de similar composición social, dado que los retos y dificultades que implica enseñar a estudiantes de origen desfavorecido (o de lengua materna indígena) son muy diferentes que en el caso de estudiantes de familias con educación secundaria completa y/o terciaria. También hay que tener en cuenta las tasas de deserción de las escuelas y sus políticas de selección de estudiantes, dado que una escuela puede mejorar sus resultados a través de la exclusión de estudiantes con dificultades.


Las comparaciones entre escuelas deben considerar la diferencia entre medir el “logro educativo” y medir el “aprendizaje”


En rigor, si el propósito es entregar a las escuelas, familias y/o autoridades, información acerca de la capacidad de enseñar de los docentes y las escuelas, es necesario medir el progreso de los estudiantes a lo largo de un período lectivo (“aprendizaje”) y no únicamente el resultado final (“logro”). Las diferencias entre estos dos términos se expresan en que:

  • El aprendizaje puede ser definido como el cambio ocurrido en los conocimientos y capacidades de cada estudiante a lo largo del año lectivo. Su medición requiere la aplicación de dos pruebas, una al inicio y otra al final. De este modo es posible constatar el progreso realizado por cada alumno.
  • El “logro educativo” en cambio, se mide con una única prueba y refleja la acumulación de conocimientos y capacidades a lo largo de toda la vida del estudiante, lo cual incluye el capital cultural familiar y sus experiencias en otras escuelas o con otros docentes.


Debe tenerse siempre presente que el aprendizaje y el logro educativo de los estudiantes dependen tanto de lo que hacen las escuelas y docentes, como del esfuerzo de los propios estudiantes, del apoyo de las familias a la tarea escolar, del contexto comunitario y cultural y de las políticas educativas. Los problemas educativos no pueden ser resueltos apelando exclusiva ni principalmente a mecanismos de mercado.

Los resultados expresados en términos de rankings de escuelas deben ser mirados con precaución


La mayoría de rankings de escuelas transmiten una falsa imagen de ordenamiento. Una escuela puede ocupar el primer lugar y otra el número 40 y, sin embargo, las diferencias entre sus promedios pueden no ser estadísticamente significativos. Esto significa que no puede decirse si un promedio es realmente superior al otro, porque las diferencias entran dentro de los márgenes de error de la medición. Pero aun cuando las diferencias en los promedios sean estadísticamente significativas, pueden ser irrelevantes en términos de las proporciones de alumnos que logran los niveles de desempeño esperados.


Itinerario para la toma de decisiones
Considerando las alternativas existentes para una política de evaluación, antes de poner en marcha un sistema de evaluación (o de modificar uno existente) es indispensable seguir un itinerario de decisiones para definir las características del sistema que incluya al menos las siguientes preguntas básicas:

  • ¿Para qué se quiere evaluar?
  • ¿Quiénes usarán los resultados y con qué propósitos?
  • ¿Qué se espera saber que no se sepa ya?
  • ¿Cuáles serán las unidades de análisis para el reporte de resultados: estudiantes individuales, grupo de clase/maestros, escuelas, tipos de escuela, entidades subnacionales, sistema educativo?
  • De acuerdo a los propósitos definidos, ¿qué es más apropiado evaluar –aprendizaje o logro educativo– al egreso de determinados grados o ciclos?
  • ¿Qué tipo de consecuencias tendrán los resultados y para quiénes?
  • De acuerdo a los propósitos definidos, ¿es necesario trabajar en forma censal o son suficientes evaluaciones en base a muestras?
  • ¿Qué grados y qué disciplinas es importante evaluar?
  • ¿Cada cuánto tiempo es necesario y adecuado realizar las evaluaciones?

Las respuestas a estas preguntas deberían plasmarse en un plan de evaluación a corto, mediano y largo plazo, claro y explícito. En la elaboración de dicho plan es muy importante considerar los costos en dinero implicados en cada opción y los recursos humanos necesarios para su adecuada implementación. En particular, se debe balancear la inversión a realizar en la recogida de información con la inversión en la difusión y uso de los resultados. Muchos Ministerios de Educación destinan importantes sumas de dinero a recoger una gran cantidad de información todos los años, que luego casi no se analiza, ni se difunde ni se utiliza. Es absolutamente inconducente implementar un primer operativo de evaluación si no se ha elaborado un plan de trabajo de largo plazo.

“Mandatos” útiles al momento de tomar decisiones políticas respecto al sistema de evaluación:

  • “No harás daño”. Una de las primeras normas del juramento hipocrático señala que el médico se abstendrá de todo aquello que pueda generar daño o perjuicio a sus pacientes. Del mismo modo, a la hora de pensar en un sistema de evaluación es importante considerar los riesgos de efectos no deseados y perjudiciales que la estrategia de evaluación diseñada podría tener sobre el propio sistema educativo que se desea mejorar.
  • “El consumo excesivo de este producto puede resultar perjudicial para la salud”. La evaluación no puede estar por encima de la educación. El exceso de evaluaciones puede producir perjuicios para la salud del sistema educativo, en especial si solo hay evaluaciones pero no hay políticas para dar respuesta a los problemas que estas ponen de manifiesto.
  • “El consumo exclusivo de este producto también puede resultar perjudicial para la salud”. La evaluación no produce mejoras por sí misma. Debe estar alineada con otro conjunto de elementos para que aquellas se produzcan. Se debe evitar la ingenuidad de pensar que evaluando mucho – y poco más que eso – se va a mejorar la educación.
  • “No evaluarás en vano”. Se debe evitar recoger todos los años información que nunca será analizada ni utilizada. Para que un sistema de evaluación tenga impacto, debe tener una periodicidad que garantice que los datos puedan ser analizados, discutidos, comprendidos y utilizados. Incorporar la nueva información y traducirla en decisiones y acciones lleva tiempo. Los cambios en el sistema educativo requieren más tiempo aun.
  • “Vísteme despacio Sancho, que estoy apurado”. Es muy importante que quienes toman las decisiones en los Ministerios de Educación desestimen la creencia ingenua en la existencia de caminos fáciles y rápidos. No es posible montar un programa de evaluación serio en tres meses. No existe coyuntura ni “ventana de oportunidad” que lo justifique: las consecuencias de la improvisación se harán sentir tarde o temprano. La evaluación requiere reflexión cuidadosa acerca de sus fines y usos; discusión pública sobre qué es lo fundamental a evaluar; diálogo e involucramiento de diferentes actores; conformación de equipos técnicos competentes en diversos aspectos; e información previa para que los actores se involucren con la evaluación.


Extraído de
http://rinace.net/riee/numeros/vol1-num1/art4_htm.html
Pedro Ravela, Patricia Arregui, Gilbert Valverde, Richard Wolfe, Guillermo Ferrer, Felipe Martínez Rizo, Mariana Aylwin y Laurence Wolff

Related Posts Plugin for WordPress, Blogger...

Busca en mis sitios