Científicos destacados se reúnen en ETS para explorar la personalización de la evaluación al servicio de la equidad

"Debemos intentar medir el conocimiento y las habilidades de cada individuo de la manera que mejor se adapte a ellos."
- Randy Bennett, Cátedra Norman O. Frederiksen de ETS en Innovación en Evaluación

En teoría, la evaluación personalizada parece tan... obvia. Todos podemos estar de acuerdo en lo que se necesita, pero es el "cómo lo hacemos" lo que ha generado desafíos y oportunidades que obligan a la comunidad de evaluadores a redefinir la evaluación futura y desarrollar soluciones para medir lo que cada individuo sabe y puede hacer, independientemente de su origen, interés, lengua materna o identidad cultural.

En ETS, vivimos y respiramos el futuro de la evaluación cada día. Y aunque tenemos el privilegio de contar con algunos de los investigadores más destacados y mentes innovadoras trabajando en el aprendizaje personalizado, entre otras áreas clave de investigación, sabemos que no podemos solos remodelar el paradigma actual de la evaluación.

"Este evento es uno de los muchos pasos que damos para explorar colectivamente el potencial de las evaluaciones personalizadas para el bien común", dijo Kadriye Ercikan, vicepresidenta de Investigación en ETS.

El evento desató un diálogo dinámico, fomentando debates sobre lo que se necesita para hacer realidad las evaluaciones personalizadas que sirvan a la equidad. Esta fue la primera de cuatro reuniones previstas para este año, alineadas con la nueva agenda de investigación de ETS; esto es lo que escuchamos en nuestro primer evento:

Randy Bennett,
Cátedra Norman O. Frederiksen en Innovación en Evaluación, ETS

"Estados Unidos, así como muchos otros países en el mundo, han experimentado niveles sin precedentes de cambio demográfico. Ese cambio ha ido en la dirección de una mayor diversidad en muchas dimensiones, pero especialmente en líneas raciales/étnicas, lingüísticas y socioeconómicas. Todas esas dimensiones conllevan niveles significativos de heterogeneidad cultural. Las pruebas actuales no fueron diseñadas para acomodar los niveles de diversidad cultural que nosotros, o muchos otros países, estamos experimentando. Ese conflicto está impulsando la necesidad de nuevas concepciones de evaluación, incluida la personalización en servicio de responder a la diversidad.

Si no se hace intencionadamente para lograr objetivos de equidad, la personalización podría fácilmente producir mayores niveles de inequidad. Quién realiza el desarrollo importa, importan los métodos que eligen, las variables que seleccionan para personalizar importan, las muestras de participantes que emplean importan. La demografía de quienes desarrollan pruebas y sistemas de aprendizaje con IA no se parece en nada a la de las poblaciones de escuelas públicas en EE. UU. ni en muchos otros países. Eso es un problema en el contexto de diseñar personalización para la equidad."

Matthew L. Bernacki,
Profesor Asociado de Ciencias del Aprendizaje y Estudios Psicológicos, Universidad de Carolina del Norte en Chapel Hill, Donald y Justeen Tarbet Distinguished Scholar

"Los investigadores educativos han pasado décadas investigando cómo los diseños instruccionales pueden beneficiar a estudiantes específicos, y existen muchas teorías psicológicas sobre el aprendizaje que pueden servir como manuales para que profesores y diseñadores piensen en cómo una lección puede adaptarse o aprovechar un activo que el alumno aporta a una experiencia de aprendizaje. En lugar de construir ese conocimiento, los expertos en personalización deben incorporar la base de conocimientos existente a su esquema de diseño para que se personalicen según las características adecuadas del alumno que se sepa mejoran cómo las evaluaciones pueden impactar en las experiencias y resultados del alumno. ... Adoptar la personalización como lente para el diseño puede ayudarnos a construir una representación más completa del individuo mientras diseñamos experiencias de aprendizaje y evaluación que brinden a cada individuo una oportunidad equitativa para demostrar y desarrollar sus conocimientos y habilidades."

Okan Bulut,
Profesor asociado de Medición y Ciencia de Datos, Universidad de Alberta

"A medida que pasemos de evaluaciones universales a evaluaciones personalizadas, necesitaremos replantear los conceptos fundamentales de la medición educativa, como la fiabilidad y la validez. Con definiciones más amplias e inclusivas para estos conceptos, podemos apoyar mejor la adopción masiva de evaluaciones personalizadas. La personalización tiene el potencial de abordar problemas sociales fomentando un entorno de aprendizaje más equitativo e inclusivo. Las evaluaciones personalizadas empoderarán a los alumnos para demostrar auténticamente lo que saben y pueden hacer a través de sus propias experiencias y elecciones de aprendizaje."

Neil Heffernan,
Fundador y presidente del consejo de The ASSISTments Foundation; Profesor William Smith Dean de Informática y director del Programa de Posgrado en Ciencias y Tecnologías del Aprendizaje en Worcester Polytechnic Institute

"Fue genial unirme a ETS y a mis compañeros para hablar sobre la personalización al servicio de la equidad. Las evaluaciones formativas seguirán siendo importantes, y fue un honor unirme a este grupo para explicar cómo mi plataforma online de matemáticas, ASSISTments.org, está personalizando el aprendizaje."

Serena Magrogan,
Director Senior, AP^® Currículo, Instrucción y Evaluación The College Board^®

"La clave de la evaluación personalizada es el aprendizaje prescriptivo. Las oportunidades de aprendizaje prescriptivo, con parámetros claros de salida y rúbricas de puntuación inicial, pueden ayudar a los estudiantes a asumir responsabilidad, responsabilidad e incluso orgullo por el resultado de su trabajo. Y de este modo, la evaluación les beneficia, no en contra."

Kyndra contra Middleton,
Director de Estudios de Posgrado Profesor de Psicología Educativa,
Universidad Howard

"En los últimos años, hemos visto desarrollos emocionantes y prometedores en la personalización del aprendizaje y la evaluación. La personalización tiene el potencial de beneficiar a cada estudiante y, al mismo tiempo, proporcionar acceso equitativo. Sin embargo, con la personalización viene la responsabilidad de asegurar una medición adecuada, ¡pero actualmente este movimiento va en una dirección positiva!"

Robert J. Mislevy,
Profesor Emérito, Universidad de Maryland, ex Cátedra Frederic M. Lord en Medición y Estadística, ETS

"La personalización y la evaluación sociocultural y sensible (SCRA) aprovechan los antecedentes personales, sociales, culturales y lingüísticos de los estudiantes según corresponda para mostrar mejor lo que saben y pueden hacer. Mi charla expone un marco de razonamiento evidenciario para apoyar el diseño, uso y análisis de las propiedades de evaluaciones de diversos tipos, aplicando estos principios para distintos fines. Examino diseños que ofrecen diferentes compensaciones entre la validez local de las interpretaciones de las puntuaciones en cuanto al aprendizaje y la comparabilidad de las puntuaciones en los programas de pruebas a gran escala. Los avances en la ciencia y la tecnología del aprendizaje hacen posibles una variedad de enfoques que aumentan la validez, y por tanto la equidad, para los usos específicos de las puntuaciones."

Jesse R. Sparks,
Científico Investigador Senior, ETS

"Existen muchos retos y oportunidades en la personalización de la evaluación en beneficio de una mayor equidad. La forma en que aplicamos la personalización puede variar en alcance y calidad según el caso de uso de la evaluación — por ejemplo, puede haber mayores oportunidades para incorporar la personalización en evaluaciones diseñadas para apoyar la enseñanza y el aprendizaje. Es fundamental que entendamos cómo y cuándo debemos personalizar y en qué medida el apoyo personalizado puede conducir a un acceso más equitativo para participar en la evaluación y contribuir a resultados estudiantiles y oportunidades educativas más equitativos."

Ye Tong,
Vicepresidente Senior de Operaciones de Evaluación, NBME

"Las evaluaciones personalizadas tienen un enorme potencial en el ámbito formativo para apoyar a los alumnos en su camino hacia el éxito. Sin embargo, debemos ser conscientes de los aspectos culturales y sociales del diseño e implementación de las evaluaciones durante la personalización. Por un lado, necesitamos proporcionar evaluaciones justas que ofrezcan a todos oportunidades equitativas para demostrar lo que saben y pueden hacer independientemente de su origen. Por otro lado, necesitamos utilizar las evaluaciones como herramienta didáctica para crear conciencia en los alumnos no solo sobre su propia cultura y valores, sino también sobre los demás."