Aplicaciones personalizadas para el motor de puntuación e-rater

Para aprovechar la tecnología de e-ratuer,^® ETS ofrece experiencia en evaluación y puntuación de redacción a instituciones que incorporan tecnología de puntuación ETS en sus cursos y servicios online. Puedes usar redacción estándar y prompts creados por el profesor, o decidir desarrollar los tuyos propios.

Si utilizas los prompts estándar que siguen las directrices de ETS, las respuestas de los ensayos se envían a los modelos de puntuación de nivel académico de ETS y reciben una puntuación holística.

Si decides desarrollar tus propias preguntas de escritura personalizadas, tendrás que recopilar respuestas de ensayos para estas preguntas, puntuarlas y enviarlas a ETS para que se pueda construir y certificar un modelo de puntuación. ETS te ayudará a desarrollar las consignas y puntuar las respuestas para que se pueda construir un modelo de puntuación personalizado del motor de evaluador electrónico siguiendo los requisitos que se describen a continuación.

Desarrollo de temas

• Los expertos de ETS pueden ayudar en el desarrollo de temas personalizados para ensayos que reflejen los estándares nacionales, estatales o distritales.
• ETS puede ofrecerte asesoramiento experto mientras desarrollas tus propios temas personalizados, realizas sesiones de puntuación y analizas la puntuación de la redacción.
• O los especialistas en desarrollo de ETS pueden realizar el trabajo de desarrollo y realizar las sesiones de puntuación previa a la prueba, según las especificaciones de la organización.

Puntuación de ensayos

• ETS puede realizar sesiones de puntuación de ensayos y recopilar datos para construir modelos personalizados, incorporando metodologías de puntuación y procedimientos de aseguramiento de calidad.
• Además de gestionar la captación, formación y seguimiento de lectores, ETS ofrece un sistema de puntuación online que instructores y lectores formados pueden utilizar para calificar respuestas procesadas por texto.
• Cuando se completa la puntuación, los archivos de ensayo y las puntuaciones de los lectores correspondientes pueden transmitirse al motor de puntuación para la construcción automatizada del modelo.

Aseguramiento de la calidad

• Antes de construir el modelo de puntuación para un tema, la tecnología e-rater se entrenará analizando ensayos escritos sobre ese tema.
• Los ensayos deben recibir dos puntuaciones de lectores independientes que hayan aplicado estándares de puntuación consistentes y justos.
• El conjunto de ensayos puntuados también debe representar toda la escala de puntuación (por ejemplo, una escala del 1 al 6), para que el motor e-rater pueda entrenarse para reconocer ensayos en cada uno de los puntos de puntuación.

Requisitos para los modelos de motores e-rater

• Estándares de puntuación claramente definidos en una guía de puntuación
• Un tema de ensayo que refleje la tarea de escritura representada en la guía de puntuación
• Una población estudiantil idéntica o similar a la que usará el tema
• Dos puntuaciones de lector independiente por cada respuesta al ensayo (los lectores deben estar entrenados para usar la guía de puntuación)
• Al menos 350 respuestas de estudiantes por tema en un archivo electrónico, formateado según las especificaciones de ETS