Una conversación sobre la inteligencia artificial y el examen TOEFL iBT con Kara McWilliams de ETS

La IA ha dejado clara su presencia en muchas industrias, siendo la educación una de ellas con un impacto multifacético. Como cualquier avance tecnológico, la IA aporta muchos beneficios y ofrece a los usuarios varias consideraciones. Nos sentamos con Kara McWilliams, vicepresidenta de Innovación y Desarrollo de Productos de ETS, para explorar cómo ETS ha estado utilizando la IA para ofrecer una experiencia válida, confiable y significativa en el examen TOEFL iBT, la innovación en IA que está en curso para ayudar a los examinados a obtener el mejor rendimiento el día del examen y cómo estas tecnologías avanzadas pueden, en última instancia, beneficiar a las instituciones. 

  1. El TOEFL ya es conocido por ser la prueba de inglés más eficaz para fines académicos del mercado. ¿Cómo se integra la IA en el proceso de evaluación para garantizar que los estudiantes puedan demostrar su dominio del inglés académico de la forma más significativa?

KM:  En ETS, integramos a la perfección tecnología de inteligencia artificial de vanguardia en el TOEFL, empleando dos enfoques fundamentales para mejorar la experiencia de evaluación tanto para los examinados como para las instituciones. En primer lugar, nuestro uso innovador de la inteligencia artificial generativa garantiza que los elementos de la prueba estén meticulosamente elaborados, reflejando escenarios académicos del mundo real para evaluar con precisión el dominio del idioma. Esto no solo subraya nuestro compromiso de permanecer a la vanguardia de la evaluación educativa, sino que también garantiza una experiencia de evaluación dinámica y relevante para los candidatos. Además, nuestro uso de la calificación automatizada basada en la investigación a través de algoritmos de inteligencia artificial asegura una evaluación justa y consistente del desempeño del examinado y la capacidad de entregar calificaciones de calidad a los examinados y a los usuarios de las calificaciones rápidamente. 

  1. ETS ha estado aprovechando la inteligencia artificial generativa y la puntuación automatizada durante décadas, pero los laboratorios de inteligencia artificial de ETS están siempre innovando. ¿Ha habido algún avance reciente?

KM:  ¡Así es! De hecho, ETS lanzó el primer motor de puntuación automatizado de texto escrito, “e-Rater”, en 1999. Pero es cierto, siempre estamos innovando. Recientemente, nuestro motor de puntuación de IA del lenguaje hablado, “Speechrater ® ”, se modernizó mediante la invención de “Serval”. Los científicos e ingenieros de los laboratorios de IA introdujeron características novedosas que hicieron que el motor fuera más flexible, utilizable e incluso más preciso. Lo que más me entusiasma de este progreso es que la innovación también permite a ETS proporcionar a los examinados información más detallada sobre su desempeño para que puedan seguir progresando en el desarrollo de su competencia lingüística. Los examinados comenzaron a ver los beneficios de Serval en los informes de puntuación de TOEFL optimizados que se publicaron en noviembre. 

  1. ¿Qué es importante que las instituciones sepan sobre cómo se utiliza la IA en el TOEFL?

KM:  Es importante que las instituciones sepan que ETS mantiene el máximo rigor al aprovechar la IA para que puedan seguir confiando en las puntuaciones de alta calidad que ETS siempre ha entregado. A veces existe la preocupación de que la IA, ya sea utilizada en la generación de contenido o en la calificación, pueda reducir la calidad de una evaluación o las puntuaciones producidas. Es importante que las instituciones sepan que en ETS nos esforzamos mucho para garantizar que ese no sea el caso. De hecho, hay una gran cantidad de investigaciones publicadas sobre la calidad de nuestros modelos y motores de IA. Aun así, creemos que los humanos y las máquinas deben trabajar juntos para ofrecer la máxima calidad.

Nuestro uso de IA en TOEFL se caracteriza por un enfoque de “humano en el circuito”.

Si bien utilizamos la inteligencia artificial generativa para el desarrollo de ítems y algoritmos de inteligencia artificial para la calificación, la experiencia humana sigue siendo una parte integral del proceso. Nuestros expertos en contenido de primer nivel trabajan en colaboración con la tecnología de inteligencia artificial para garantizar una evaluación justa, válida y confiable por la que TOEFL siempre ha sido conocido. 

  1. Algunas empresas de evaluación del idioma inglés se oponen firmemente al uso de IA en sus evaluaciones, ¡y otras utilizan una puntuación de IA completa! ¿Por qué ETS adopta el enfoque de máquina más humano y en qué se diferencia?

KM:  La integración de la evaluación por máquina y por persona aprovecha la precisión de la IA y la comprensión matizada de los humanos. Si bien la evaluación completa por parte de personas puede ser subjetiva y propensa a sesgos, y la evaluación completa por parte de IA puede tener problemas con los matices contextuales, el enfoque híbrido garantiza un equilibrio armonioso. Combina la eficiencia y la coherencia de la IA con la conciencia cultural, la empatía y la comprensión contextual que aportan los evaluadores humanos. Al trabajar juntos, las máquinas y los humanos no solo mejoran la precisión y la confiabilidad, sino que también captan la profundidad y las sutilezas del dominio del idioma, lo que la convierte en una metodología de evaluación más integral. 

  1. Sabemos que la seguridad es una prioridad para ETS, ¿puede la IA ayudar a aumentar la seguridad del TOEFL?

KM:  La tecnología avanzada ha mejorado drásticamente las capacidades de seguridad en TOEFL y sabemos que son efectivas. Hemos visto que la cantidad de tramposos que se detectan aumenta con las nuevas versiones de capacidades y también aumenta la velocidad con la que podemos identificar a los examinados que hacen trampa. Nuestros científicos han desarrollado innovaciones que aprovechan la biometría, como el reconocimiento facial, el reconocimiento de voz, la dinámica de pulsaciones de teclas para detectar inconsistencias, la detección de anomalías en los patrones de puntuación, así como otras capacidades para garantizar que estamos identificando a los examinados deshonestos y ofreciendo una experiencia significativa a los examinados honestos. 

  1. ¿Le preocupa en lo más mínimo el uso de la IA en la tecnología educativa? Si es así, ¿cómo están mitigando esas preocupaciones en ETS?

KM:  La integración de la IA en la tecnología educativa no me preocupa en sí misma, sino que subraya la necesidad de una implementación responsable y ética. La IA, cuando se utiliza de manera responsable, tiene el potencial de revolucionar la educación, ofreciendo herramientas innovadoras que personalizan las experiencias de aprendizaje e impulsan los resultados educativos.

Pero lo crucial es dotar a los educadores y a las partes interesadas de los conocimientos y las herramientas necesarias para navegar éticamente por el panorama tecnológico.

No se trata de tener miedo a la tecnología, sino de empoderar a las personas para que la utilicen de manera responsable. Esta es una de las razones por las que estoy tan entusiasmado de que ETS forme parte del comité directivo de TeachAI junto con ISTE , Khan Academy y Code.org, donde estamos desarrollando herramientas y recursos que ayudan a lograr este objetivo. 

  1. Dada toda la innovación que se está produciendo en los laboratorios de IA de ETS, ¿de qué otras formas cree que la IA seguirá ayudando a los examinados del TOEFL?

KM:  Creo que la verdadera oportunidad de aprovechar la IA para ayudar a los examinados es a través de soluciones innovadoras que los ayuden a desarrollar su competencia lingüística antes de rendir el examen TOEFL y a seguir desarrollándola después de haberlo hecho. En los laboratorios de IA de ETS vemos un gran poder en la combinación de la IA generativa y las capacidades de personalización para ayudar a los examinados a alcanzar sus objetivos de manera eficiente.

Al comprender los objetivos de los alumnos, así como sus antecedentes y experiencias, podemos ofrecerles contenido de desarrollo que sea relevante, significativo y tenga en cuenta las necesidades socioculturales. Y, con la modernización de Speechrater, ahora podemos proporcionar retroalimentación y perspectivas en tiempo real para ayudar a los alumnos a mejorar su competencia oral. Esas perspectivas no tienen por qué terminar con el TOEFL: al proporcionar retroalimentación muy específica, ETS, en asociación con instituciones, puede seguir ayudando a los alumnos a desarrollar su competencia a medida que avanzan en su trayectoria educativa. 

  1. ¿Existen otras innovaciones en IA que crea que puedan ayudar a las instituciones en el futuro?

KM:  La tecnología avanzada sin duda ofrece a ETS la capacidad de proporcionar a las instituciones información más sólida para ayudarlas a seguir desarrollando la competencia lingüística de los estudiantes. Sin embargo, también puede haber otras oportunidades. Por ejemplo, el análisis predictivo puede ayudar a las instituciones en sus esfuerzos por identificar a los estudiantes adecuados para sus programas y, lo que es más importante, ofrecerles la información que necesitan para garantizar que los estudiantes tengan éxito. ETS tiene una gran cantidad de datos importantes y espera utilizarlos de manera responsable para ayudar a las instituciones a encontrar a los estudiantes adecuados para sus programas y ayudarlas a alcanzar sus objetivos. Actualmente, ETS tiene reuniones de equipo con las instituciones para entender cómo podemos aplicar nuestras capacidades de inteligencia artificial para brindarles más valor. 

  1. ¿Hay algo más que debería entusiasmar a las instituciones con toda la innovación en inteligencia artificial que se está produciendo en ETS?

KM:  Hay muchas cosas que nos entusiasman a todos mientras pensamos en el uso responsable de la IA en ETS.

Lo que más me gusta de ETS es que no nos guiamos por la IA, sino por cómo podemos ayudar a resolver los problemas de nuestros clientes.

Luego, combinamos la tecnología avanzada con la ciencia de cómo sabemos que las personas aprenden y demuestran lo que saben de manera más efectiva y brindan soluciones significativas. Lo que espero que más entusiasme a las instituciones es cómo los laboratorios de ETS están innovando soluciones para brindarles conocimientos sobre mucho más que las cuatro habilidades que se evalúan actualmente en el TOEFL. Aprovechando capacidades como la IA multimodal, estamos inventando soluciones confiables para brindar conocimientos sobre cuestiones como la comunicación efectiva y la agilidad cultural. Hay mucho más por venir en ese espacio…

Da el primer paso y adquiere tu prueba aquí.

Tomado de: ETS GLOBAL

Vea el articulo original aquí.

Scroll to Top
Abrir chat
1
Hola
¿En qué podemos ayudarte?