Recherche TOEIC®

Faire progresser l’évaluation, l’enseignement et l’apprentissage de la langue anglaise

Régularité des scores

Les scores TOEIC sont cohérents et fiables. Les recherches du programme de recherche TOEIC permettent de garantir que les scores ne sont influencés que par des facteurs liés à la maîtrise linguistique . Lors de l’examen de la cohérence ou de la fiabilité des scores, plusieurs aspects de la procédure de test sont pris en compte, y compris les items, les formulaires de test, les occasions ou administrations et les évaluateurs.

Analyse statistique de terrain pour les tests ponts® TOEIC repensés

Cet article rapporte les résultats d’une étude de terrain qui a contribué au développement des tests TOEIC Bridge repensés. Les analyses statistiques fournissent des preuves initiales pour soutenir les affirmations selon lesquelles les scores TOEIC Bridge repensés sont cohérents, et que les résultats aux tests sont des indicateurs significatifs de la maîtrise de l’anglais des niveaux de base à intermédiaire.

Défendre la qualité et l’utilisation d’une nouvelle évaluation de la maîtrise linguistique : argument de validité pour les tests ponts® repensés du TOEIC

Cet article résume « l’argument de validité » des tests TOEIC Bridge repensés. L’argument de validité se compose de quatre affirmations majeures concernant la cohérence des scores, la validité et l’équité, l’utilisation appropriée des tests et les impacts positifs ; ensemble, cela fournit un récit cohérent sur la qualité de la mesure et les usages prévus des scores de test. En considérant les affirmations et les preuves présentées dans l’argument de validité, les lecteurs devraient pouvoir mieux évaluer si les tests TOEIC Bridge repensés sont appropriés à leur situation.

Surveillance des schémas de changement de score pour soutenir la qualité des tests d’écoute et de lecture du TOEIC®

Dans les programmes de tests à grande échelle et à enjeux élevés, comme le programme TOEIC, certains candidats passent un test plus d’une fois au fil du temps. Les schémas de changement de score de ces soi-disant « répéteurs » peuvent être analysés pour soutenir la qualité globale du test (par exemple, sa fiabilité, sa validité, ses usages prévus). Cette étude a examiné les schémas de changement de score mentionnés précédemment, dans le but d’évaluer la fiabilité et la validité des scores des tests d’écoute et de lecture du TOEIC^®.

Mesurer la maîtrise de l’anglais entre sous-groupes : utiliser l’évaluation de l’équité des scores pour évaluer l’équité des tests

Les évaluations de compétence en anglais sont conçues pour une population ciblée et peuvent inclure des candidats issus de milieux démographiques, socioculturels et éducatifs divers. Le test est considéré comme équitable et les scores obtenus par différents sous-groupes de candidats ont la même signification. Une façon d’évaluer l’équité du test est de produire un test lié pour chaque sous-groupe et de comparer les résultats du test lié avec ceux du test initial qu’ils ont passé.

Comment l’ETS note les réponses aux tests d’expression orale et écrite du TOEIC®

En général, les évaluateurs humains sont utilisés pour noter les tests d’expression orale et écrite en raison de leur capacité à évaluer une gamme plus large de performances linguistiques que les systèmes automatisés. Cet article décrit comment l’ETS assure la fiabilité et la cohérence des scores des évaluateurs humains pour les tests TOEIC Oral and Writing grâce à la formation, à la certification et à des procédures systématiques de suivi administratif et statistique.

Lien des partitions orales du TOEIC® à l’aide des scores d’écoute du TOEIC®

Dans les programmes de test, plusieurs formes d’un test sont utilisées selon les administrations afin d’éviter la surexposition des formulaires de test et de réduire la possibilité que les candidats acquièrent une connaissance préalable du contenu du test. Parce que de légères différences peuvent apparaître dans la difficulté statistique des formulaires alternatifs, une procédure statistique appelée liaison des scores de test a été couramment utilisée pour ajuster ces différences de difficulté afin que les formes de test soient comparables.

Surveillance des performances aux tests d’écoute et de lecture du TOEIC® entre les administrations à l’aide des informations de base des candidats

Le processus de notation du test TOEIC Listening and Reading comprend des procédures de suivi qui garantissent la cohérence des scores entre différentes formes et administrations de tests, et que les interprétations des compétences sont justes. Cette étude explore la possibilité d’utiliser des informations sur le parcours des candidats afin d’améliorer plusieurs types de procédures de suivi. Les résultats des analyses suggèrent que certaines variables de fond pourraient faciliter le suivi des performances au test entre les administrations, renforçant ainsi les procédures de contrôle qualité pour le test TOEIC Listening and Reading et renforcant les preuves de cohérence des scores.

Évaluation des moyens de stabilité du score aux tests pour les tests d’expression orale et écrite du TOEIC®

Pour les tests éducatifs, il est essentiel de maintenir la cohérence des échelles de score et de comprendre les sources de variation des moyennes de scores au fil du temps. Cela permet de garantir que les interprétations des capacités des candidats soient comparables d’une administration (ou d’une forme) à l’autre. En utilisant des procédures statistiques, cette étude a examiné la cohérence des scores rapportés pour les tests d’expression orale et écrite du TOEIC.

Comparaison du contenu, des statistiques des items et des performances des candidats au test repensé et classique du TOEIC® Listening and Reading

Cet article compare le contenu, la fiabilité et la difficulté des tests classiques et des tests TOEIC repensés en 2006 d’écoute et de lecture. Bien que les tests repensés incluaient des types d’items légèrement différents pour mieux refléter les modèles actuels de maîtrise linguistique, les tests ont été jugés similaires entre les versions.

Analyses statistiques pour les formats d’items étendus du test de parole TOEIC®

Les programmes de test doivent revoir périodiquement leurs évaluations afin de s’assurer que leurs items ou tâches de test sont bien alignés avec les activités réelles. Pour cette raison, afin de mieux soutenir l’apprentissage des langues communicatives et de décourager l’utilisation de la mémorisation et d’autres stratégies de prise de test, l’ETS a élargi le format existant de certains items du test TOEIC^® Speaking en mai 2015.

Analyses statistiques pour le test d’écoute et de lecture du TOEIC® mis à jour

Pour garantir que les tests continuent de répondre aux besoins des candidats et des utilisateurs de scores, il est important que les programmes de test revoient périodiquement leurs évaluations. Pour cette raison, afin de suivre l’évolution constante de l’anglais et les façons dont les individus communiquent couramment sur le lieu de travail et dans la vie quotidienne mondiale, un test TOEIC Listening and Reading mis à jour a été conçu et lancé pour la première fois en mai 2016.

La cohérence des scores de parole du TOEIC® entre les évaluations et les tâches

Cette étude examine la cohérence des scores de parole du TOEIC. L’analyse utilise une méthodologie fondée sur la théorie de la généralisabilité, qui permet aux chercheurs d’examiner dans quelle mesure certains aspects de la procédure de test (c’est-à-dire les évaluateurs, les tâches) influencent les scores. Les résultats apportent des preuves soutenant les affirmations selon lesquelles les scores de l’expression orale du TOEIC sont cohérents.

Surveillance des performances individuelles des évaluateurs pour les tests d’expression orale et écrite du TOEIC®

Cet article décrit les procédures mises en œuvre lors des tests TOEIC Speaking and Writing pour surveiller la performance individuelle des évaluateurs et améliorer la qualité globale des notations. Ces procédures multifacettes et soigneusement développées contribuent à limiter le risque d’erreur humaine, contribuant ainsi à la cohérence et à la fiabilité des scores TOEIC.

Formulaires alternatifs : Fiabilité et changements de score de test pour les tests d’expression orale et écrite du TOEIC®

La fiabilité ou la cohérence des scores peut être examinée de différentes manières, notamment dans le degré de cohérence des scores du même candidat sur différents types de tests (ce qu’on appelle « fiabilité des formulaires équivalents ») et dans les différentes occasions de test (« fiabilité test-retest »). Cette étude a examiné la cohérence des scores TOEIC Oral and Writing à travers différents formulaires de test à différents intervalles de temps (par exemple, 1–30 jours, 31–60 jours) et a constaté que les scores de test étaient raisonnablement élevés en termes de fiabilité équivalente test-test-retest.

Analyses statistiques pour l’étude pilote de parole et d’écriture du TOEIC®

Cet article présente les résultats d’une étude pilote qui a contribué au développement du test TOEIC Oral and Writing. L’analyse de la fiabilité des scores des tests a trouvé des preuves de plusieurs types de cohérence des scores, notamment la fiabilité inter-évaluateurs (accord de plusieurs évaluateurs sur un score) et la cohérence interne (une mesure basée sur la corrélation entre les items du même test).

Résultats de l’étude de terrain pour le test d’écoute et de lecture repensé du TOEIC®

Cet article décrit les résultats d’une étude de terrain pour les tests d’écoute et de lecture repensés du TOEIC en 2006, qui inclut des analyses de la difficulté des items et des tests, de la fiabilité et des corrélations entre les sections du test et les tests classiques de compréhension orale et de lecture du TOEIC. Les résultats sont cohérents avec une autre étude de comparabilité (celle de Liao, Hatrak et Yu en 2010), qui a trouvé des preuves de la fiabilité des tests repensés et a suggéré que les scores du test repensé pouvaient être interprétés et utilisés de manière similaire aux scores classiques du TOEIC Listening and Reading.