Evaluación PISA 2003

Programa Internacional de Evaluación de Estudiantes (PISA), auspiciado por la UNESCO y la OCDE. Este artículo que ofrece la traducción al español de algunos apartes sobre Competencia en Lectura del informe 2003 publicado por este Programa.

Autor: OECD/PISA | Publicado: 2011-02-05

Etiquetas: investigaciones lectura lenguaje evaluaciones


INFORME PISA 2003

PISA 2000 | PISA 2003 | PISA 2006 | PISA 2009
PISA 2009 Estudiantes en Línea | PISA 2012

 

El Programa Internacional de Evaluación de Estudiantes (PISA) auspiciado por la UNESCO y la Organización para la Cooperación y el Desarrollo Económico (OCDE). En la primera etapa de esta iniciativa (2000-2001) participaron 43 países y 42 lo hicieron en la segunda (2003), entre estos se encuentran México, España, Argentina, Chile, Brasil, Perú y Uruguay.
Dada la importancia de este Programa, ponemos a disposición de nuestros usuarios la traducción de algunos apartes del énfasis sobre “Competencia en Lectura” del informe recientemente publicado. En declaración reciente dada al diario El Tiempo de Bogotá, Daniel Bogoya, director del Icfes, informó que Colombia participará en la tercera etapa del Proyecyo Pisa que se realizará en el año 2006 y cuyo énfasis será en el Dominio de la Competencia Científica. La participación de Colombia en este programa refuerza la decisión del Ministerio de Educación por evaluar el nivel en el cual se encuentran los estudiantes [1].


¿QUÉ ES EXACTAMENTE OECD/PISA?

Resumen de Características

Básicas:

  • Evaluación internacional estandarizada, desarrollada en conjunto por los países participantes y administrada a estudiantes de 15 años que se encuentran actualmente en los sistemas educativos.
  • Encuesta llevada a cabo en 43 países en la primera etapa (32 en el 2000 y 11 en el 2002) y en 42 países en la segunda etapa (2003).
    · Prueba típicamente administrada a un número variable de estudiantes entre 4.500 y 10.000 por cada país.

Contenido:

  • OECD/PISA 2003 cubre los dominios de la Lectura, Matemáticas y Competencia Científica, no tanto en términos de la destreza en el currículo escolar sino más bien enfocado al conocimiento y habilidades importantes y necesarias para la vida adulta. El examen de las competencias de las materias a través del currículo continúa siendo parte integral del OECD/PISA mediante la evaluación de la solución de problemas de un nuevo dominio.
  • Énfasis en la destreza de los procesos, el entendimiento de los conceptos y la habilidad de funcionar en varias situaciones en cada dominio.

Metodología:

  • Se realizaron pruebas con lápiz y papel, con evaluaciones de dos horas por estudiante.
  • Los materiales de las pruebas consisten en una mezcla de unidades de escogencia múltiple y preguntas en las que se pide al estudiante que construya su propia respuesta. Estas unidades se organizaron en grupos basados en textos de la vida real.
  • Se cubrió un total de aproximadamente siete horas de preguntas/problemas, en las que diferentes estudiantes tomaron diferentes combinaciones de unidades.
  • Los estudiantes contestaron un cuestionario de 30 minutos sobre sus antecedentes, suministrando información sobre ellos mismos y sus hogares. A los Directores de las escuelas se les dio un cuestionario de 20 minutos referente a su escuela.

Ciclo de Evaluación:

  • La evaluación tiene lugar cada tres (3) años: 2000, 2003 y 2006.
  • En cada uno de éstos períodos se dará una mirada profunda a uno de los dominios “mayores”, al cuál se dedican las dos terceras partes de la prueba; los otros dominios suministran un resumen del perfil de habilidades. Los dominios “mayores” son la competencia en Lectura en el 2000; la competencia en Matemáticas en el 2003 y la competencia Científica en el 2006 [1].

Resultados:

  • Obtener un perfil básico de conocimiento y habilidades entre los estudiantes de 15 años.
  • Obtener indicadores contextuales que permitan relacionar los resultados con las características de los estudiantes y de las escuelas.
  • Tendencias de los indicadores que muestren cómo cambian los resultados a través del tiempo.
  • Un conocimiento básico valioso para el análisis de política y para la investigación.


COMPETENCIA EN LECTURA

DEFINICIÓN DEL DOMINIO:
Las definiciones de Lectura y de las competencias de lectura han cambiado con el paso del tiempo para ajustarse a los cambios de la sociedad, la economía y la cultura. El concepto de aprendizaje y especialmente de aprendizaje para toda la vida, han expandido las percepciones de esta competencia y las demandas que sobre ellas se hacen. El alfabetismo no se considera ya como una habilidad que se adquiere solamente en la infancia, durante los primeros años de escolaridad. En cambio, ahora es visto como un amplio conjunto de conocimiento, habilidades y estrategias que los individuos construyen a través de la vida, en distintas situaciones, en la interacción tanto con sus compañeros como con la comunidad en la que participan [2].

Mediante procesos de construcción de consenso que involucraron grupos de asesores, expertos en lectura, seleccionados por los países participantes y la OECD/PISA, la siguiente definición de competencia en Lectura se adoptó para la encuesta:

“La competencia en Lectura es la comprensión, uso y reflexión sobre textos escritos, con el fin de lograr las metas personales, desarrollar el conocimiento y potencial propios y, participar en la sociedad”

Esta definición va más allá de la noción de competencia en Lectura como la decodificación y la comprensión literal: implica que la competencia en lectura involucra la comprensión, el uso y la reflexión de la información escrita para varios propósitos. Toma pues en cuenta el papel activo e interactivo del lector en adquirir conocimiento proveniente del texto escrito. La definición reconoce también la amplia gama de situaciones en las cuáles la competencia en Lectura juega un papel importante para los adultos jóvenes, de lo privado a lo público, de la escuela al trabajo, de la participación ciudadana activa al aprendizaje para toda la vida. Expresa con claridad la idea de que el nuevo alfabetismo posibilita alcanzar las aspiraciones individuales; -definiendo aspiraciones desde, ganar una calificación educativa u obtener un trabajo, hasta objetivos menos inmediatos que enriquecen y amplían la vida personal. El nuevo alfabetismo también equipa al lector con una serie de herramientas lingüísticas cada vez más importantes para responder a las demandas de las sociedades modernas con sus instituciones formales, grandes burocracias y sistemas legales complejos.

Los lectores responden a un texto dado en formas variadas a medida que buscan cómo utilizar y comprender lo que están leyendo. Este proceso dinámico incluye muchos factores, algunos de los cuales se pueden manejar en evaluaciones a gran escala tales como la OECD/PISA. Estas incluyen: la situación en la que se lee, la estructura del texto mismo y las características de las preguntas que se hacen sobre el texto (Matriz de Evaluación del Texto). Todos estos factores se consideran componentes importantes del proceso de lectura y fueron manejados en la creación de las unidades utilizadas en la evaluación.

Para poder utilizar un formato de texto, las características de las unidades y de las situaciones para diseñar las tareas de evaluación y, posteriormente, al interpretar los resultados, el rango para cada uno de estos factores tenía que estar especificado. Esto permitió la categorización de cada tarea de forma tal que el peso de cada componente pudiera ser tenido en cuenta en la recopilación final de los resultados de la encuesta.


FORMATO DEL TEXTO:

En el corazón de la evaluación OECD/PISA se encuentra la diferenciación entre Texto Continuo y No Continuo.

  • El Texto Continuo típicamente se compone de frases que a su vez, se organizan en párrafos. Estos se deben acomodar dentro de estructuras mayores tales como secciones, capítulos y libros. La clasificación básica de Texto Continuo es para propósitos de retórica, o de tipos de texto.
  • Texto No Continuo (o documentos como lo denominan algunos) se puede categorizar de dos maneras. Uno es el abordaje de la estructura formal utilizado en el trabajo de Kirsch y Mosenthal (1989 – 1991) [3]. Su trabajo clasifica los textos por la manera en la que las listas de apoyo se reúnen para construir los distintos tipos de Texto No Continuo. El otro método de clasificación se basa en las descripciones corrientes de los formatos de esos textos. Este último abordaje es el que se utiliza en la clasificación de Texto No Continuo en la encuesta OECD/PISA.

Texto Continuo:

Los tipos de texto son formas estándar de organizar los textos Continuos por contenido y propósito del autor.

  • Narración: es el tipo de texto en el que la información se refiere a propiedades de los objetos en el tiempo. Típicamente los textos narrativos proveen respuestas a preguntas como “cuándo” o “en que secuencia”.
  • Exposición es el tipo de texto en el cuál la información se presenta como conceptos compuestos o concepciones mentales, o elementos dentro de los cuáles los conceptos o concepciones mentales pueden ser analizados. El texto provee una explicación de cómo los elementos que lo componen se interrelacionan como un todo significativo y con frecuencia responde preguntas de “cómo”.
  • Descripción es el tipo de texto en el cual la información se refiere a propiedades de objetos en el espacio. Los textos descriptivos típicamente ofrecen una respuesta a preguntas de “qué”.
  • Argumentación es el tipo de texto que presenta proposiciones referentes a la relación entre conceptos, o entre otras proposiciones. Los textos argumentativos frecuentemente contestan preguntas de “por qué”. Otra sub-clasificación importante de los textos argumentativos la constituyen los textos persuasivos
  • Instrucción (algunas veces llamado de prescripción) es el tipo de texto que provee instrucciones sobre lo que se debe hacer e incluye procedimientos, reglas, regulaciones y condiciones que especifican ciertos comportamientos
  • Un Documento o Registro es un texto diseñado para estandarizar y conservar información. Se puede distinguir por características muy precisas de texto y formato.
  • Hipertexto es un conjunto de fracciones de texto enlazadas entre ellas de tal forma que las unidades se pueden leer en diferentes secuencias, permitiendo a los lectores seguir varis rutas en la información [4].

Texto No Continuo:

Los textos No Continuos están organizados en forma diferente a los Textos Continuos y por ese motivo para leerlos es necesario utilizar un método diferente. Los lectores se pueden referir al trabajo de Kirsch y Mosenthal (1989 – 1991) [3] para consultar la argumentación sobre el enfoque estructural. De acuerdo con su trabajo, las listas son los ejemplos más elementales de textos no continuos. Estas consisten en un cierto número de anotaciones que comparten alguna(s) propiedad(es). Esta propiedad compartida se puede usar como título o etiqueta para la lista. Las listas deben tener sus anotaciones en algún orden (ej: nombres de los estudiantes de una clase en orden alfabético) o en desorden (ej: lista de artículos que se van a comprar en un almacén).

Clasificar el texto No Continuo por su formato como se muestra enseguida, ofrece una forma sencilla de discutir que tipo de textos No Continuos deben incluirse en la evaluación.

  • Cuadros y gráficas: son representaciones gráficas de datos. Se usan con el propósito de argumentar científicamente, o también en revistas y periódicos, para mostrar información pública numérica y tabulada en formato visual.
  • Tablas y Matrices: las tablas son matrices de filas y columnas. Por lo regular todos los registros de cada columna y de cada fila comparten propiedades y por lo tanto los títulos de las filas y columnas forman parte de la estructura de información del texto. Generalmente las tablas incluyen horarios, hojas de cálculo, formatos de órdenes e índices.
  • Diagramas: con frecuencia acompañan descripciones técnicas (ej: la demostración de las partes o componentes de un electrodoméstico), textos explicativos o instructivos (ej: ilustrar cómo como se ensambla un electrodoméstico). Se utilizan con frecuencia para diferenciar los diagramas de un procedimiento (cómo hacer) de los de un proceso (cómo funciona algo)
  • Mapas: son textos no continuos que indican las relaciones geográficas entre lugares. Existen varios tipos de mapas: Los mapas de carreteras indican la distancia y las posibles rutas entre sitios definidos. Los mapas temáticos indican las relaciones entre localidades y además, características físicas o sociales.
  • Formas: son textos estructurados y formateados que piden que el lector responda preguntas específicas en forma específica. Las formas se utilizan en varias organizaciones para recolectar datos. Con frecuencia se trata de formularios de respuestas estructurados o precodificados. Ejemplos típicos son formularios de impuestos, formularios de inmigración, formularios para visas, formularios de aplicación, cuestionarios estadísticos etc.
  • Hojas de Información: difieren de las formas en que ofrecen información en lugar de pedirla. Resumen la información de manera estructurada y con un formato tal, que el lector puede fácil y rápidamente localizar segmentos de información específica. Las hojas de información pueden contener varias formas de texto así como listas, tablas, figuras y graficas sofisticadas basadas en texto (encabezados, fuente, indentados, bordes, etc…) para resumir y resaltar información. Líneas de tiempo, listas de precios, catálogos y programas son ejemplos de este tipo de texto no continuo.
  • Convocatorias y Publicidad: son documentos diseñados para invitar al lector ha que haga algo; ej: comprar bienes o servicios, participar en reuniones o encuentros, elegir a una persona para un cargo público, etc…
    El propósito de estos documentos es persuadir al lector. Ofrecen algo y requieren tanto atención como acción. Los anuncios publicitarios, las invitaciones, convocatorias, advertencias y notificaciones son ejemplos de este formato de documento.
  • Comprobantes: testimonian que el poseedor tiene derecho a ciertos servicios. La información que contienen debe ser suficiente para demostrar si el comprobante es válido o no. Típicamente son tiquetes, facturas, etc…
  • Certificados: son reconocimientos o admisiones escritas, de la validez de un acuerdo o contrato. Se formalizan más en el contenido que en el formato. Requieren de la firma de una o más personas autorizadas o competentes para testimoniar la verdad de una aseveración dada. Garantías, certificados escolares, diplomas, contratos, etc. son documentos que tienen estas propiedades.


Figura 1
Relación entre los cinco procesos (aspectos) de la Competencia en Lectura y las categorías de los formatos de texto

La distribución y variedad de los textos que se pide leer a los estudiantes en OECD/PISA constituyen características importantes de la evaluación. En las encuestas del 2000 y 2003 el texto continuo representó 2/3 partes de las tareas o unidades contenidas en la evaluación. Dentro de esta categoría, en ambos ciclos, el porcentaje mayor lo tuvo el texto expositivo.


CARACTERÍSTICAS DE LAS UNIDADES

Tres juegos de variables se utilizaron para describir las características de las unidades: los procesos (aspectos) que exponen la tarea que debe realizar el examinado; los tipos de unidades, que establecen de que maneras el examinado debe demostrar su dominio de la tarea; y las reglas para hacerlo, que especifican cómo las respuestas de los examinados van a ser evaluadas. Aunque cada una de ellas será analizada más adelante, la primera requiere una mayor atención.

Cinco procesos (aspectos)
En un esfuerzo por simular situaciones de lectura reales, la evaluación de lectura de la OECD/PISA midió los cinco procesos siguientes, asociados con alcanzar la comprensión completa del texto, así sea este continuo o no continuo. Se esperaba que los examinados demostraran su dominio en todos estos procesos:

  • recuperación de información,
  • formación de una comprensión amplia y general,
  • desarrollo de una interpretación,
  • reflexión y evaluación del contexto del texto, y
  • reflexión y/o evaluación de la forma del texto

 

Figura 2
Características que distinguen los cinco procesos (aspectos) de la Competencia en Lectura


Los anteriores son apartes del documento “The PISA 2003 Asssessment Framework” que usted puede descargar completo y gratuitamente (en inglés, en formato PDF, 1.7MB) del sitio OECD/PISA: http://www.pisa.oecd.org/
Puede descargar el archivo PDF directamente de las siguientes direcciones:
http://www.pisa.oecd.org/Docs/download/PISA2003Frameworks_final.php
http://www.eduteka.org/pdfdir/PISA2003Frameworks_final.php

También puede descargar (en español, en formato PDF, 346KB) el documento “Aptitudes Básicas para el Mundo de Mañana – Otros Resultados del Proyecto PISA 2000. Resumen Ejecutivo” de las siguientes direcciones:
http://www.pisa.oecd.org/Docs/Download/PISAES_Spa.php
http://portal.unesco.org/uis/TEMPLATE/pdf/pisa/exec_sum_spa.php
http://www.eduteka.org/pdfdir/PisaExecSumEspanol.php

NOTAS DEL EDITOR:

[1] Ver el tema de discusión abierto en el Foro de EDUTEKA “Prueba PISA 2003: Incapacidad lectora traba el aprendizaje posterior”:

[2] International Reading Association (2001). “Integrating literacy and technology in the curriculum: A position statement” (Integración del Lenguaje y las TICs en el Aula de Clase). Julio 3 de 2002. http://www.reading.org Debido a lo interesante de este documento, EDUTEKA publicó una traducción al español de él: http://www.eduteka.org/DeclaracionIRA.php

[3] Kirsch, I.S. y P.B. Moscnthal (1989-1991), “Understanding Documents. A Monthly Column”, Journal of Reading, International Reading Association, Newark, DE.

[4] Actualmente es indispensable entender qué es el Hipertexto ya que los textos digitales que lo incorporan requieren que escritores y usuarios desarrollen habilidades que están más allá de las requeridas para enfrentar medios impresos. Artículo publicado por EDUTEKA en el cual se plantean algunas ideas generales para escribir efectivamente en este formato y estrategias para crear buenos enlaces: http://www.eduteka.org/Hipertexto1.php


CRÉDITOS:
Traducción de EDUTEKA de algunos apartes de la sección correspondiente a “Competencias en Lectura” del documento “The PISA 2003 Asssessment Framework” publicado (en inglés, en formato PDF, 1.7MB) por OECD/PISA. http://www.pisa.oecd.org/


Publicación de este documento en EDUTEKA: Julio 26 de 2003.
Última modificación de este documento: Julio 26 de 2003.

Autor de este documento: OECD/PISA

Si desea referenciar está página use: http://www.eduteka.org/Pisa2003.php


Reseña de recursos digitales para Química
Enseñanza de las ciencias, basada en indagación
Evaluación Pisa 2006
Informe Pisa 2006: Hallazgos Fundamentales
Evaluación PISA 2003
Ciclo del Agua
Las Pedagogías Fundadas en la Investigación Búsquedas en la Reconfiguración de la Educación
¿Qué pasa con la ingeniería en Colombia?
Informática en el Currículo de Ciencias Sociales (PDF)
Nuevos Módulos de Simulaciones Listos para Descargar
Declaración de la NSTA sobre el Uso de la Tecnología
Colombia: Introducción Recursos en EDUTEKA para cumplir con los Estándares en Ciencias Naturales
Biodiversidad, Colombia país de vida
Cómo planear una visita escolar a un Zoológico
De visita por los museos de ciencias en la Red
Herramientas para elaborar Mapas Conceptuales
Diez consejos para integrar los medios sociales en el aula de clase
Juegos para la era digital, análisis del panorama escolar
Programación con S4A y Arduino
NETS-S: Pensamiento crítico, solución de problemas y toma de decisiones en el aula
Tendencias y retos para la adopción de las TIC en la educación escolar
Mapas Conceptuales: descarga, instalación y uso de CmapTools
Profesores excelentes, cómo mejorar el aprendizaje en América Latina y el Caribe
Reglamento de uso aceptable de las TIC
Conozca mejor los NETS-S: Investigación y Manejo de Información
Reporte horizonte 2014 - Edición para Educación Escolar (K-12)
Todo lo que realmente necesito saber, lo aprendí en el kindergarten
Trucos de fotografía con celulares y tabletas
Conozca mejor los NETS - Segundo Estándar: Comunicación y Colaboración
La taxonomía de Bloom y sus actualizaciones

Investigaciones

El efecto de los computadores sobre la escritura de los estudiantes
Estudio Internacional de Competencia en Lectura (PIRLS 2001)
Evaluación PISA 2003
Evaluación Pisa 2003 Matemáticas
Aprendizaje Visual, Metaestudio

Lectura

Estudio Internacional de Competencia en Lectura (PIRLS 2001)
El Libro digital como herramienta pedagógica
Comprensión de lectura en Internet
Evaluación PISA 2003
Declaración de la IRA sobre el uso de la Tecnología

Lenguaje

Lenguaje: Consúltale a la Real Academia de la Lengua (Grados 6° a 8°)
Cinco reglas para escribir WebQuests
Comunicación y Educación
Las 10 reglas básicas de la Netiqueta
Abra la boca...(Significación - Comunicación)

Cómo mejorar sus oportunidades de aprender
Evaluación crítica de un Sitio Web
Lista de verificación para el proceso de una WebQuest (PDF)
Matriz de Valoración de Procesos de Investigación
La Valoración Integral como fuente de Información

Comentarios al Artículo:

Comentarios Facebook:



Comentarios Disqus:

blog comments powered by Disqus






Comentarios Recientes