Este artículo describe las motivaciones detrás del diseño de las evaluaciones puente TOEIC rediseñadas para medir las cuatro habilidades de comunicación, los propósitos de las evaluaciones y cómo definimos la competencia en la comprensión auditiva, lectora, oral y escritura en inglés en contextos cotidianos para estudiantes básicos a intermedios. Esta información proporciona una base para el desarrollo de pruebas y la posterior investigación en validez.

Leer más

Las pruebas puente TOEIC rediseñadas se desarrollaron utilizando una metodología de desarrollo de evaluaciones llamada diseño centrado en la evidencia (ECD). Este artículo documenta cómo se utilizó la ECD para diseñar tareas que obtuvieron evidencia de la competencia en inglés de nivel básico a intermedio de los examinados, y cómo las diversas fuentes de datos obtenidas a lo largo del proceso de desarrollo influyeron en las decisiones de diseño de ítems y pruebas.

Leer más

Este artículo informa de los resultados de un estudio de campo que contribuyó al desarrollo de las pruebas TOEIC Bridge rediseñadas. Los análisis estadísticos proporcionan evidencia inicial que respalda las afirmaciones de que las puntuaciones rediseñadas en los TOEIC Bridge son consistentes y que las puntuaciones son indicadores significativos de la competencia en inglés desde los niveles básico hasta intermedio.

Leer más

Este artículo describe dos estudios que examinaron la relación entre las puntuaciones rediseñadas de las pruebas TOEIC Bridge y las autoevaluaciones de la competencia lingüística. Los resultados aportan pruebas que respaldan las afirmaciones de que las puntuaciones de las pruebas son indicadores significativos de la competencia lingüística, y que las puntuaciones pueden utilizarse para diferenciar de manera significativa los niveles de competencia lingüística según los estándares de competencia lingüística como el Marco Europeo Común de Referencia para las Lenguas (MCER).

Leer más

Este estudio investigó si las puntuaciones de las pruebas TOEIC^® Speaking eran buenos predictores de la efectividad comunicativa de los examinados, según las evaluaciones de profesionales en el entorno internacional. Profesionales de 10 países participaron en una encuesta en la que evaluaron la efectividad comunicativa de los examinados en diferentes escenarios comunicativos. Los resultados proporcionan evidencia de que las puntuaciones de las pruebas TOEIC Speaking son una evaluación significativa de la competencia que se compara con cómo los profesionales perciben la efectividad comunicativa.

Leer más

Este estudio investigó si las puntuaciones del TOEIC Writing eran buenos predictores de la "adecuación funcional" (o efectividad comunicativa) de las habilidades de escritura de los examinados, según lo juzgan profesionales en el ámbito internacional. Profesionales de 10 países participaron en una encuesta en la que evaluaron la adecuación funcional de la escritura de los examinados en diferentes escenarios comunicativos. Los resultados proporcionan evidencia de que las puntuaciones del TOEIC Writing son una evaluación significativa de la competencia que se compara con cómo los profesionales perciben la suficiencia funcional de la escritura.

Leer más

Este artículo resume el "argumento de validez" para las pruebas TOEIC Bridge rediseñadas. El argumento de validez consta de cuatro afirmaciones principales sobre la consistencia de las puntuaciones, validez y equidad, uso adecuado de las pruebas e impactos positivos; en conjunto, esto proporciona una narrativa coherente sobre la calidad de la medición y los usos previstos de las puntuaciones. Al considerar las afirmaciones y las pruebas de apoyo presentadas en el argumento de validez, los lectores deberían poder evaluar mejor si las pruebas TOEIC Bridge rediseñadas son adecuadas para su situación.

Leer más

Este documento ofrece una visión general no técnica del desarrollo de exámenes y de los proyectos de investigación realizados para asegurar que las puntuaciones del TOEIC sirvan como indicadores válidos de las habilidades de los examinados para comunicarse en inglés en entornos laborales globales.

El principal valor de las pruebas TOEIC radica en su validez, que puede definirse como el grado en que las pruebas hacen lo que afirmamos que pueden hacer.

Leer más

Mediante el examen de las puntuaciones de las pruebas, esta investigación encontró que las pruebas TOEIC miden habilidades distintas pero relacionadas y que, en conjunto, proporcionan una imagen razonablemente completa de la competencia en inglés. Este hallazgo aporta evidencia adicional de que el enfoque de cuatro habilidades para la evaluación de la competencia lingüística es crucial.

Leer más

Las evaluaciones de competencia en inglés están diseñadas para una población objetivo de pruebas y pueden incluir a examinados de diversos orígenes demográficos, socioculturales y educativos. Se asume que la prueba es justa y las puntuaciones obtenidas por diferentes subgrupos de examinados tienen el mismo significado. Una forma de evaluar la equidad de la prueba es producir una prueba vinculada para cada subgrupo y comparar los resultados de la prueba vinculada con las puntuaciones de la prueba original que realizaron.

Leer más

Para comprender mejor el significado de las puntuaciones de las pruebas y facilitar la toma de decisiones, los usuarios de puntuaciones pueden necesitar comprender cómo se relacionan las puntuaciones de dos pruebas diferentes. La relación entre las puntuaciones de dos pruebas distintas suele resumirse en una "tabla de concordancias" que indica la correspondencia entre las puntuaciones de ambas pruebas. Desafortunadamente, algunas tablas de concordancia se producen y distribuyen sin ningún respaldo de investigación, lo que puede llevar a decisiones inexactas e injustas sobre los examinados.

Leer más

Este estudio utilizó una técnica estadística llamada "análisis factorial" para determinar qué modelo estadístico explicaba mejor el rendimiento en la prueba de Escucha y Lectura TOEIC. Los investigadores encontraron que un modelo (modelo de dos factores) en el que las habilidades de lectura y escucha se representaban como habilidades distintas se explicaba mejor el rendimiento, coherente con cómo se supone que deben interpretarse las puntuaciones.

Leer más

En los programas de prueba, se utilizan múltiples formas de una prueba en diferentes administraciones para evitar la sobreexposición de los formularios y reducir la posibilidad de que los examinados adquieran conocimientos anticipados sobre el contenido de la prueba. Debido a que pueden aparecer pequeñas diferencias en la dificultad estadística de los formularios alternativos, se ha utilizado comúnmente un procedimiento estadístico conocido como vinculación de puntuaciones de pruebas para ajustar estas diferencias de dificultad y que los formularios de prueba sean comparables.

Leer más

Tradicionalmente, los investigadores han utilizado el término "autenticidad" para referirse al grado en que las tareas de un examen de idioma corresponden a las utilizadas en el mundo real, siendo la autenticidad una característica deseada de las tareas y exámenes. Este documento técnico explica cómo se amplió el formato de varias preguntas en la prueba TOEIC Speaking para incluir una mayor variedad de situaciones reales.

Leer más

Este artículo explica cómo las pruebas de cuatro habilidades son la mejor manera de evaluar si alguien puede comunicarse en inglés, y explica cómo este enfoque puede:

• resultar en una forma más justa de evaluar a los examinados
• mejorar la calidad de las decisiones de los usuarios de pruebas
• crear un impacto más positivo para los responsables de la toma de decisiones, profesores y alumnos

Leer más

El test de Escucha TOEIC incluye elementos o tareas relacionados con el entorno laboral global y con una variedad de contextos auténticos. A medida que ha aumentado la necesidad de un número cada vez mayor de formularios de prueba, un objetivo importante para el test de Escucha TOEIC ha sido aumentar la eficiencia de la generación de ítems manteniendo un gran conjunto de elementos en una amplia gama de contextos, lo que ha sido un objetivo importante para el test de Escucha TOEIC.

Leer más

Este estudio investigó si la competencia en una habilidad lingüística particular (por ejemplo, habla) podría estimarse mejor considerando no solo las puntuaciones de los tests TOEIC correspondientes a esa habilidad, sino también las puntuaciones de otras habilidades. Los resultados respaldaron esta afirmación, sugiriendo que las puntuaciones en las pruebas TOEIC de cuatro habilidades proporcionan conjuntamente una medición más válida de la competencia en inglés que cualquier habilidad aislada.

Leer más

Este estudio investiga:

• El grado en que las puntuaciones de una habilidad en el TOEIC se correlacionan con las autoevaluaciones de los examinados sobre sus habilidades en inglés en las cuatro habilidades
• Si una habilidad de inglés (por ejemplo, lectura) puede estimarse o predecirse con mayor precisión utilizando múltiples otras puntuaciones de los exámenes TOEIC, es decir, escucha, expresión oral y escritura

Leer más

El funcionamiento diferencial de ítems (DIF) es un procedimiento estadístico utilizado para identificar ítems o tareas que están inesperadamente sesgados de alguna manera, favoreciendo inapropiadamente a un grupo de examinados frente a otro. Uno de los desafíos para las pruebas de expresión oral y escritura es la falta de técnicas DIF prácticas y probadas que puedan utilizarse para analizar pruebas basadas en el rendimiento o de "respuesta construida". Este artículo investiga varias de estas técnicas e ilustra cómo se está llevando a cabo la investigación para garantizar la equidad de las interpretaciones de las puntuaciones.

Leer más

Este artículo compara el contenido, la fiabilidad y la dificultad de las pruebas clásicas y de las rediseñadas pruebas de comprensión auditiva y lectora del TOEIC de 2006. Aunque las pruebas rediseñadas incluían tipos de ítems ligeramente diferentes para reflejar mejor los modelos actuales de competencia lingüística, se consideró que las pruebas eran similares entre las versiones.

Leer más

El Diseño Centrado en la Evidencia (ECD) es una metodología de desarrollo de evaluaciones que aclara explícitamente qué mide una evaluación y apoya la interpretación de habilidades basándose en las puntuaciones de las pruebas. Este artículo describe los procesos de ECD utilizados para desarrollar las pruebas de expresión oral y escritura del TOEIC. La evidencia recogida a través del proceso de diseño de la prueba produjo un apoyo fundamental para la validez de las interpretaciones de las puntuaciones de los tests de expresión oral y escritura del TOEIC.

Leer más

Este artículo informa de los resultados de un estudio piloto que contribuyó al desarrollo de la prueba de expresión oral y escritura del TOEIC. El análisis de la fiabilidad de las puntuaciones encontró evidencia de varios tipos de consistencia en las puntuaciones, incluyendo la fiabilidad entre evaluadores (acuerdo de varios evaluadores sobre una puntuación) y la consistencia interna (una medida basada en la correlación entre ítems de la misma prueba).

Leer más

Para garantizar que las pruebas sigan satisfaciendo las necesidades de los examinados y usuarios de puntuaciones, es importante que los programas de evaluación revisen periódicamente sus evaluaciones. Por esta razón, para mantenerse al día con el uso continuo y cambiante del inglés y las formas en que las personas comúnmente se comunican en el lugar de trabajo global y en la vida cotidiana, se diseñó y lanzó por primera vez una prueba actualizada de Escucha y Lectura TOEIC en mayo de 2016.

Leer más

Tras cualquier proyecto de rediseño de la prueba —como la reformulación del test de Escucha y Lectura del TOEIC en 2006— es importante aportar pruebas de que las puntuaciones del examen pueden seguir interpretándose de forma significativa. Este estudio examinó la relación entre las puntuaciones en el rediseño del test de Comprensión Auditiva y Lectura del TOEIC y la percepción que los examinados tienen sobre su propio dominio del inglés. Los investigadores encontraron correlaciones moderadas entre las puntuaciones y las percepciones de los examinados, lo que aporta evidencia de que las puntuaciones en las pruebas rediseñadas de Comprensión Auditiva y Lectura del TOEIC son indicadores significativos de la habilidad en inglés.

Leer más

Este estudio buscó comparar las puntuaciones del TOEIC Bridge con las autoevaluaciones de los examinados sobre sus propias capacidades para realizar tareas cotidianas de idioma en inglés. Los resultados sugieren que las puntuaciones del test se correlacionaban bien con las autoevaluaciones de los examinados, aportando más evidencia que respalda las puntuaciones del TOEIC Bridge como indicadores válidos y justos de dominio del inglés.

Leer más

Este estudio examina la relación entre las puntuaciones de Comprensión Oral y Lectura del TOEIC y las puntuaciones de Expresión Oral y Escritura del TOEIC para determinar si las puntuaciones de Comprensión Oral y Lectura deben usarse como predictores de las puntuaciones de Expresión Oral y Escritura y viceversa. Los resultados respaldan la validez de las puntuaciones de las pruebas de las pruebas de Comprensión Oral y Lectura proporcionan interpretaciones significativas de las habilidades de Comprensión Oral y Lectura).

Leer más

Este estudio buscó comparar las puntuaciones de las pruebas de expresión oral y escritura del TOEIC con las autoevaluaciones de los estudiantes sobre sus capacidades para realizar tareas cotidianas en inglés. Los investigadores informaron de correlaciones relativamente fuertes entre las puntuaciones de las pruebas y las autoevaluaciones. Este hallazgo aporta más evidencia que apoya las puntuaciones de las pruebas de habla y escritura del TOEIC como indicadores de competencia en inglés. Este estudio también fue publicado como Powers, Kim, Weng, y Van Winkle (2009).

Leer más

El anclaje de escalas es un proceso que agrupa las puntuaciones de los exámenes en rangos de puntuación o niveles de competencia. Utiliza una combinación de métodos estadísticos y juicio experto para producir descripciones de las habilidades y conocimientos que suelen mostrar los examinados en cada nivel de competencia. Este informe de investigación describe el proceso de anclaje de escalas para las pruebas de Escucha y Lectura del TOEIC, lo que facilita interpretaciones significativas de las puntuaciones.

Leer más

Este informe describe los objetivos y resultados de un proyecto para actualizar la prueba de Comprensión Auditiva y Lectura del TOEIC en 2016. El uso del inglés para la comunicación, especialmente en contextos laborales internacionales, está en constante evolución. Por ello, la prueba de Comprensión Auditiva y Lectura del TOEIC se revisa periódicamente para asegurar que el contenido refleje la comunicación actual en el lugar de trabajo y en la vida diaria, apoyando así interpretaciones significativas sobre las habilidades del idioma inglés y promoviendo un impacto positivo en la enseñanza y el aprendizaje del inglés.

Leer más

Con el paso del tiempo, se vuelve importante revisar el diseño de una prueba para asegurar que su conceptualización de la competencia lingüística se alinea con la teoría actual y las tareas de la prueba siguen siendo indicativas de tareas del mundo real. Este informe describe los objetivos, la alineación teórica, los procedimientos y los resultados de un esfuerzo de rediseño para la prueba de Escucha y Lectura del TOEIC.  

Leer más

Este artículo describe los resultados de un estudio de campo para las pruebas de Escucha y Lectura rediseñadas del TOEIC en 2006, que incluye análisis de dificultad, fiabilidad y correlaciones entre las secciones de prueba y las clásicas pruebas de Escucha y Lectura del TOEIC. Los resultados son consistentes con otro estudio de comparabilidad (Liao, Hatrak y Yu en 2010), que encontró evidencia de la fiabilidad de las pruebas rediseñadas y sugirió que las puntuaciones en dicha prueba podrían interpretarse y usarse de manera similar a las puntuaciones clásicas de Escucha y Lectura del TOEIC.

Leer más

Este estudio comparó las puntuaciones del TOEIC Bridge con las evaluaciones de los profesores sobre la capacidad de los examinados para realizar tareas diarias del idioma en inglés. Los autores informaron de correlaciones moderadas entre estas evaluaciones y las puntuaciones de los exámenes, que proporcionan evidencia de respaldo de la validez de las puntuaciones del TOEIC Bridge como indicadores de dominio del idioma inglés.

Leer más

Este estudio buscó evaluar en qué medida las puntuaciones del TOEIC Bridge corresponden a las autoevaluaciones de los estudiantes y a las evaluaciones del profesor, dos medidas de la competencia en inglés. Se encontró que las puntuaciones del TOEIC Bridge estaban moderadamente correlacionadas con estas mediciones, un hallazgo que aporta validez de evidencia de que las puntuaciones del TOEIC Bridge pueden interpretarse de manera significativa como indicadores de competencia en inglés.

Leer más

Este estudio investigó la relación entre las puntuaciones del TOEIC Bridge y las evaluaciones de los estudiantes sobre su propio dominio del inglés. Se encontró que las puntuaciones del TOEIC Bridge estaban correlacionadas con las habilidades autoinformadas de lectura y escucha, proporcionando evidencia de que las puntuaciones del TOEIC Bridge son indicadores válidos o significativos de la competencia en lectura y escucha en inglés.

Leer más