Cet article rapporte les résultats d’une étude de terrain qui a contribué au développement des essais TOEIC Bridge repensés. Les analyses statistiques fournissent des preuves initiales pour soutenir les affirmations selon lesquelles les résultats repensés des tests TOEIC Bridge sont cohérents, et que les résultats aux tests sont des indicateurs significatifs de la maîtrise de l’anglais de base à intermédiaire.

Lire la suite

Cet article résume « l’argument de validité » des tests TOEIC Bridge repensés. L’argument de validité se compose de quatre affirmations majeures concernant la cohérence du score, la validité et l’équité, l’utilisation appropriée des tests et les impacts positifs ; Ensemble, cela fournit un récit cohérent sur la qualité de mesure et les usages prévus des résultats des tests. En considérant les affirmations et les preuves présentées dans l’argument de validité, les lecteurs devraient pouvoir mieux évaluer si les tests TOEIC Bridge repensés sont appropriés à leur situation.

En savoir plus

Dans les programmes de test à grande échelle et à enjeux élevés, comme le programme TOEIC, certains candidats passent un test plus d’une fois au fil du temps. Les schémas de changement de score de ces soi-disant « répéteurs » peuvent être analysés pour soutenir la qualité globale du test (par exemple, sa fiabilité, sa validité, ses usages prévus). Cette étude a examiné les schémas de changement de score mentionnés précédemment, dans le but d’évaluer la fiabilité et la validité des résultats des tests TOEIC^® Listening and Reading.

Lire la suite

Les évaluations de compétence en anglais sont conçues pour une population ciblée et peuvent inclure des candidats issus de milieux démographiques, socioculturels et éducatifs divers. Le test est considéré comme équitable et les scores obtenus par différents sous-groupes de candidats ont la même signification. Une façon d’évaluer l’équité du test est de produire un test lié pour chaque sous-groupe et de comparer les résultats du test lié avec ceux du test initial qu’ils ont passé.

Lire la suite

En général, les évaluateurs humains sont utilisés pour noter les tests d’expression orale et écrite en raison de leur capacité à évaluer une gamme plus large de performances linguistiques que les systèmes automatisés. Cet article décrit comment l’ETS assure la fiabilité et la cohérence des scores des évaluateurs humains pour les tests TOEIC Oral and Writing grâce à la formation, à la certification et à des procédures systématiques de suivi administratif et statistique.

Lire la suite

Dans les programmes de test, plusieurs formes de test sont utilisées selon les administrations afin d’éviter la surexposition des formulaires et de réduire la possibilité que les candidats acquièrent une connaissance préalable du contenu du test. Parce que de légères différences peuvent apparaître dans la difficulté statistique des formes alternatives, une procédure statistique appelée liaison des scores de test a été couramment utilisée pour ajuster ces différences de difficulté afin que les formes de test soient comparables.

Lire la suite

Le processus de notation du test TOEIC Listening and Reading comprend des procédures de suivi qui garantissent la cohérence des scores entre différents formulaires et administrations de tests, et que les interprétations des compétences sont équitables. Cette étude explore la possibilité d’utiliser des informations sur les antécédents des candidats afin d’améliorer plusieurs types de procédures de suivi. Les résultats des analyses ont suggéré que certaines variables de fond pourraient faciliter le suivi des performances des tests entre les administrations, renforçant ainsi les procédures de contrôle qualité pour le test d’écoute et de lecture du TOEIC ainsi que renforçant les preuves de cohérence des scores.

Lire la suite

Pour les tests éducatifs, il est essentiel de maintenir la cohérence des échelles de score et de comprendre les sources de variation des moyennes de score au fil du temps. Cela permet de garantir que les interprétations des compétences des candidats sont comparables d’une administration (ou d’une forme) à une autre. À l’aide de procédures statistiques, cette étude a examiné la cohérence des scores rapportés aux tests d’expression orale et écrite du TOEIC.

Lire la suite

Cet article compare le contenu, la fiabilité et la difficulté des tests classiques et repensés du TOEIC Listening and Reading en 2006. Bien que les tests repensés aient inclus des types d’items légèrement différents pour mieux refléter les modèles actuels de maîtrise linguistique, les tests ont été jugés similaires entre les versions.

Lire la suite

Les programmes de test doivent revoir périodiquement leurs évaluations afin de s’assurer que leurs items ou tâches de test sont bien alignés avec les activités réelles. Pour cette raison, afin de mieux soutenir l’apprentissage des langues communicatives et de décourager l’utilisation de la mémorisation et d’autres stratégies de prise de tests, l’ETS a élargi le format existant de certains items du test TOEIC^® Speaking en mai 2015.

Lire la suite

Pour s’assurer que les tests continuent de répondre aux besoins des candidats et des utilisateurs de scores, il est important que les programmes de test revoient périodiquement leurs évaluations. Pour cette raison, afin de suivre l’évolution constante de l’anglais et les modes de communication courants entre les individus dans le monde du travail et la vie quotidienne, un test TOEIC Listening and Reading mis à jour a été conçu et lancé pour la première fois en mai 2016.

Lire la suite

Cette étude examine la cohérence des scores de parole du TOEIC. L’analyse utilise une méthodologie fondée sur la théorie de la généralisabilité, qui permet aux chercheurs d’examiner dans quelle mesure certains aspects de la procédure de test (c’est-à-dire les évaluateurs, les tâches) influencent les scores. Les résultats apportent des preuves soutenant les affirmations selon lesquelles les scores de l’expression orale du TOEIC sont cohérents.

Lire la suite

Cet article décrit les procédures mises en œuvre lors des tests de parole et d’écriture du TOEIC pour surveiller la performance individuelle des évaluateurs et améliorer la qualité globale des notations. Ces procédures multifacette et soigneusement développées contribuent à limiter le risque d’erreur humaine, contribuant ainsi à la cohérence et à la fiabilité des scores TOEIC.

Lire la suite

La fiabilité ou la cohérence des scores peut être examinée de diverses manières, notamment dans le degré de cohérence des scores du même candidat selon les différentes formes de test (ce qu’on appelle la « fiabilité des formulaires équivalents ») et selon les occasions de test (« fiabilité test-retest »). Cette étude a examiné la cohérence des scores de l’expression orale et de l’écriture du TOEIC à travers différents types de tests à différents intervalles de temps (par exemple, 1 à 30 jours, 31 à 60 jours) et a constaté que les résultats des tests étaient raisonnablement élevés en termes de fiabilité équivalente test-test.

Lire la suite

Cet article rapporte les résultats d’une étude pilote qui a contribué au développement du test TOEIC Speaking and Writing. L’analyse de la fiabilité des scores des tests a révélé plusieurs types de cohérence des scores, notamment la fiabilité inter-évaluateurs (accord de plusieurs évaluateurs sur un score) et la cohérence interne (une mesure basée sur la corrélation entre les items du même test).

Lire la suite

Cet article décrit les résultats d’une étude de terrain pour les tests d’écoute et de lecture repensés du TOEIC en 2006, qui inclut des analyses de difficulté des items et des tests, de la fiabilité et des corrélations entre les sections de test et les tests classiques d’écoute et de lecture du TOEIC. Les résultats sont cohérents avec une autre étude de comparabilité (Liao, Hatrak et Yu en 2010), qui a trouvé des preuves de la fiabilité des tests repensés et a suggéré que les scores du test repensé pouvaient être interprétés et utilisés de manière similaire aux scores classiques du TOEIC Listening and Reading.

Lire la suite