Los puntajes de los estudiantes que aprenden inglés en una prueba estatal diseñada para medir su dominio del idioma cayeron drásticamente y se han mantenido bajos desde 2018, una caída que, según los educadores bilingües, podría tener menos que ver con las habilidades de los estudiantes y más con los cambios radicales en el diseño y el sistema automatizado de puntuación por computadora que se introdujeron ese año.
Los estudiantes de inglés que solían hablar con un maestro en su escuela como parte del Sistema de Evaluación de Dominio del Idioma Inglés de Texas ahora se sientan frente a una computadora y responden a indicaciones a través de un micrófono. La Agencia de Educación de Texas utiliza un software programado para reconocer y evaluar el habla de los estudiantes.
Según un análisis del Texas Tribune, las puntuaciones de los estudiantes cayeron después de que se introdujera la nueva prueba. En los cuatro años anteriores, aproximadamente la mitad de todos los estudiantes de 4.º a 12.º grado que tomaron la prueba obtuvieron la puntuación más alta en la parte oral de la prueba, que era necesaria para ser considerados completamente fluidos en inglés. Desde 2018, solo alrededor del 10 % de los examinados obtuvieron la puntuación más alta en la parte oral cada año.
Aprobar el TELPAS no es un requisito para graduarse, pero los resultados de la prueba pueden afectar a los estudiantes. Los educadores bilingües dicen que los estudiantes que no aprueban el TELPAS a menudo tienen que permanecer más tiempo en cursos de recuperación de inglés, lo que puede limitar sus opciones optativas y evitar que sus maestros los recomienden para cursos avanzados que los ayudarían a ser mejores candidatos cuando soliciten el ingreso a la universidad.
La forma en que la agencia de educación estatal actualmente evalúa las habilidades de los estudiantes de inglés frustra a algunos educadores que dicen que muchos de sus estudiantes ya son completamente capaces de comunicarse en inglés, pero podrían estar obteniendo bajas calificaciones en la prueba debido a los cambios de diseño.
“Estás poniendo a [los estudiantes] en un entorno artificial, lo que ya reduce la capacidad de los estudiantes para darte un lenguaje natural”, dijo Jennifer Phillips, una educadora con dos décadas de experiencia enseñando a estudiantes bilingües en Texas. “Es un sistema defectuoso”.
[ Juez impide a Texas publicar las calificaciones de responsabilidad escolar de este año ]
Las puntuaciones del TELPAS también representan el 3% de las calificaciones que la TEA otorga a los distritos escolares y a los campus en su sistema de calificación de rendición de cuentas AF. Aunque sólo representan una pequeña parte de su calificación, las puntuaciones del TELPAS podrían ser más significativas para los distritos escolares en un momento en que están cada vez más preocupados por cómo el estado evalúa su desempeño. Varios distritos han demandado a la TEA para bloquear la publicación de las calificaciones de los últimos dos años, argumentando que los cambios recientes en las métricas hicieron que fuera más difícil obtener una buena calificación y podrían hacerlos más susceptibles a la intervención estatal.
El uso por parte de la TEA de un sistema de calificación automatizado para calificar partes del TELPAS también ha sido objeto de escrutinio después de que la agencia utilizara la misma herramienta para evaluar preguntas de respuesta corta y de ensayo en las Evaluaciones de Preparación Académica del Estado de Texas de este año, la prueba estandarizada del estado que todos los estudiantes de los grados 4 a 12 toman para medir su comprensión de las materias básicas. Los educadores están cansados de usar un sistema automatizado para calificar el STAAR y lo incluyen como una de sus quejas en la última demanda de los distritos contra el estado.
Poniendo a prueba las habilidades de los estudiantes de inglés
Los estudiantes que aprenden inglés se clasifican como “bilingües emergentes” cuando ingresan a una escuela pública en Texas, indican que hablan un idioma distinto del inglés en casa y no aprueban una evaluación preliminar de inglés. Aproximadamente una cuarta parte de los estudiantes de Texas tienen esa designación.
La ley federal exige que Texas evalúe periódicamente el progreso de los estudiantes de inglés. Texas es uno de los pocos estados que desarrolló su propia prueba en lugar de utilizar el examen que se utiliza en otras partes del país.
Cada primavera, alrededor de un millón de estudiantes bilingües emergentes en las escuelas públicas de Texas toman el examen TELPAS, que consta de cuatro partes: escuchar, leer, escribir y hablar.
Antes de 2018, los maestros con capacitación en TELPAS administraban la prueba en las escuelas de los estudiantes. Las evaluaciones de comprensión auditiva y lectura eran, y siguen siendo, secciones de opción múltiple que medían la comprensión de los estudiantes. Para la expresión escrita, los maestros reunían y evaluaban una muestra del trabajo de los estudiantes en el aula durante todo el año escolar. Para la expresión oral, los maestros hablaban con los estudiantes en evaluaciones individuales o completaban una rúbrica basada en sus observaciones de la fluidez en inglés de los estudiantes durante todo el año.
Cuando la TEA trasladó la prueba a Internet, cambió el entorno de la prueba y el método de calificación. El cambio pretendía estandarizar la prueba y hacer que los resultados fueran más fiables, dijo un portavoz de la agencia. La tecnología de calificación automatizada ayudó a entregar los resultados de la evaluación oral con mayor rapidez. El año pasado, el sistema de calificación automatizada comenzó a evaluar las respuestas escritas de los estudiantes.
En cada una de las cuatro categorías de evaluación, los estudiantes obtienen una puntuación de principiante, intermedio, avanzado o avanzado alto. Los estudiantes deben seguir haciendo el examen cada año hasta obtener una puntuación de avanzado alto en al menos tres categorías; pueden obtener una puntuación de avanzado en la otra y aprobar igualmente. Antes de este año, los estudiantes tenían que obtener una puntuación de avanzado alto en cada dominio.
Varios educadores bilingües con los que habló el Tribune para este artículo dijeron que las bajas calificaciones que han recibido los estudiantes desde que se modificó la prueba no reflejan su desempeño real en el aula, y agregaron que muchos estudiantes de inglés se comunican mejor de lo que sugieren sus calificaciones. Si bien las calificaciones de los estudiantes de inglés han mejorado en la prueba STAAR desde 2021, las calificaciones de TELPAS, particularmente en la expresión oral, se han mantenido bajas desde que se modificó la prueba.
“Es un poco desalentador”, dijo Ericka Dillon, directora de educación bilingüe y cursos de inglés como segundo idioma en Northside ISD en el área de San Antonio. El distrito tiene alrededor de 14.500 estudiantes bilingües emergentes, una cantidad significativa de los cuales son competentes en inglés pero tienen dificultades para alcanzar un nivel avanzado alto en la evaluación TELPAS, dijo.
“Están haciendo lo mejor que pueden, pero aún así no podrán cumplir esos criterios”, dijo Dillon.
En respuesta a un análisis de datos de Tribune que muestra que el número promedio de puntajes aprobados en el examen TELPAS en expresión oral disminuyó después de que TEA rediseñó la prueba e introdujo el sistema de puntuación automatizado, un portavoz de la agencia dijo: “No es raro ver ajustes en el desempeño cuando el desempeño de los estudiantes se evalúa de manera estandarizada en todo el estado”. El portavoz también señaló que hablar y escribir son, por naturaleza, más desafiantes que escuchar y leer.
La TEA ha defendido enérgicamente su sistema de puntuación automática, rechazando las comparaciones de la tecnología con la inteligencia artificial. La agencia ha dicho que los seres humanos supervisan y entrenan el sistema, así como también monitorean sus resultados. La TEA dijo que un consejo asesor técnico ha aprobado la tecnología, y cuando el programa encuentra una respuesta de un estudiante que su entrenamiento no sabe cómo manejar, lo dirige a un ser humano para que lo califique.
Este año, la TEA afirmó que al menos el 25% de las evaluaciones de expresión escrita y oral del TELPAS se redirigieron a un evaluador humano para que revisara el trabajo del programa. Esa cifra osciló entre el 17% y el 23% en los seis años anteriores, según los registros públicos obtenidos por el Tribune.
Cambios en la puntuación después de las revisiones humanas
Una de las razones por las que los educadores se muestran escépticos con respecto al sistema automatizado de TELPAS es que a veces las puntuaciones cambian cuando se solicita una revisión. Los seres humanos vuelven a calificar las evaluaciones de expresión oral y escrita.
El año pasado, el 9% de las evaluaciones de expresión oral de TELPAS que revisó la TEA obtuvieron una puntuación más alta; esa cifra fue del 13% el año anterior. El sistema automatizado inicialmente puntuó más del 95% de las evaluaciones que mejoraron después de una segunda revisión, según muestran los registros públicos.
Los funcionarios del distrito escolar independiente de Spring Branch dijeron que el porcentaje de evaluaciones que mejoraron después de solicitar una nueva calificación fue incluso mayor en su distrito. Enviaron más de 800 evaluaciones de expresión oral para que se volvieran a calificar en 2022, y más de un tercio obtuvo una mejor calificación después de ser revisadas. El año siguiente, aproximadamente la mitad de sus presentaciones mejoraron después de la nueva calificación, dijeron los funcionarios.
“Si la evidencia de nuestras presentaciones de recalificación es una indicación, el sistema deja mucho que desear en cuanto a su precisión”, dijo Keith Haffey, director ejecutivo de evaluación y cumplimiento en Spring Branch ISD.
No está claro cuántas evaluaciones darían lugar a una mejor calificación después de una segunda revisión, ya que la mayoría de los resultados no se cuestionan. La cantidad de evaluaciones que se vuelven a calificar cada año es menos del 1% del total de pruebas TELPAS administradas. Los educadores dicen que tienen que sopesar los costos y las limitaciones de tiempo al decidir si solicitar una nueva calificación. Las revisiones son gratuitas si dan como resultado una mejor calificación; si no es así, las escuelas tienen que pagar $50 por cada solicitud de nueva calificación.
Además, los educadores dicen que no es fácil decidir qué resultados impugnar porque no tienen acceso a las respuestas de audio de los estudiantes. Si bien la TEA dice que los coordinadores de pruebas del distrito pueden solicitar sesiones de escucha, algunos dijeron que la agencia les ha dicho que solo los padres pueden solicitar los archivos. Esto contrasta con los resultados de STAAR: las respuestas escritas de los estudiantes están disponibles en línea para los distritos.
“Si no podemos escuchar cómo les fue en TELPAS, no podemos decir si aquí es donde realmente están o no”, dijo Dillon.
No es un “reflejo exacto”
Edith Treviño, conocida cariñosamente como la Dra. ET, solía ser la especialista en inglés como segundo idioma del centro de servicios educativos de la TEA en Edinburg. Ahora dirige una práctica de consultoría privada que ayuda a los estudiantes a aprobar el examen TELPAS.
Treviño dijo que le preocupa que el sistema de calificación automatizado penalice a los estudiantes que hablan inglés con fluidez pero hablan con acento, mezclan algunas palabras de su lengua materna o se alejan del uso del lenguaje académico.
“Según TELPAS, los niños no deben responder como la gente normal”, dijo.
Para obtener una puntuación alta en la parte oral del examen, los estudiantes deben responder a cada pregunta con respuestas que duren entre 45 y 90 segundos. Tienen dos oportunidades para registrar una respuesta y deben usar un lenguaje académico adecuado para su nivel de grado.
Pero Treviño dijo que las indicaciones suelen ser simples y no requieren respuestas largas. En un video reciente de TikTok , dijo que algunas preguntas eran como pedirles a los estudiantes que identificaran una naranja.
Debido a que aprobar el TELPAS no es un requisito para graduarse y los puntajes solo representan una pequeña parte de las calificaciones de rendición de cuentas del campus y del distrito, algunas escuelas no priorizan ayudar a los estudiantes a prepararse para el examen. Pero los resultados pueden afectar la trayectoria educativa de los estudiantes.
Muchos distritos escolares inscriben a los estudiantes que están aprendiendo inglés en cursos de ESL, lo que puede impedirles tomar ciertas asignaturas optativas y cursos avanzados debido a conflictos de horarios. Los maestros o el personal también pueden dudar en recomendar a un estudiante cursos avanzados si todavía está tomando cursos de ESL, dijo Phillips. Esos cursos avanzados, especialmente en el nivel de la escuela secundaria, son cruciales para ser competitivos en las admisiones universitarias.
Ella dijo que cualquier política escolar que impida que los estudiantes de inglés participen en cursos avanzados equivaldría a una discriminación basada en el idioma. Sin embargo, dijo que es una práctica común que ha observado en su carrera como educadora y mientras estudiaba para su doctorado en educación.
“No está en la ley, pero sí en la práctica”, dijo Phillips.
El hecho de no poder aprobar el examen TELPAS también puede afectar la experiencia de los estudiantes en la escuela. Los niños que no aprueban el examen pueden internalizar el fracaso, lo que a su vez los hace vulnerables a más dificultades académicas, dijo Phillips.
“Lo que esto le hace a la autoestima de los niños es horrible”, dijo Treviño, particularmente para los estudiantes que pueden hablar bien inglés pero tienen resultados de exámenes que les indican que no son competentes.
Carlene Thomas, ex coordinadora de ESL para la TEA y ahora directora ejecutiva de una empresa de consultoría educativa, dijo que le gustaría ver que la TEA use herramientas más sofisticadas que permitan respuestas más conversacionales de los estudiantes para garantizar que TELPAS sea “significativo en la forma en que los estudiantes interactúan socialmente y con el material de contenido”.
Agregó que los educadores también deberían ayudar a los estudiantes brindándoles más oportunidades de practicar el inglés durante las clases, confiando menos en la traducción directa y asegurándose de que comprendan los desafíos y la estructura de la prueba.
Pero hasta el momento, dijo, “TELPAS no nos está dando un reflejo preciso de dónde están nuestros estudiantes”.
.
