Vos données d'évaluation linguistique sont-elles précises et fiables ?

Vos données d'évaluation linguistique sont-elles précises et fiables ?

La valeur des compétences linguistiques est en augmentation.

Les apprenants et les éducateurs découvrent que les individus capables de démontrer une compétence dans plus d'une langue améliorent leurs chances d'être admis à l'université, de décrocher un bon emploi et d'augmenter leur potentiel de gains. L'évaluation est le moyen le plus efficace de déterminer la compétence.

Lorsque vous vous fiez à une évaluation de compétence linguistique, comment savez-vous que ses résultats sont précis et fiables ? Il s'avère que toutes les évaluations ne sont pas créées de la même manière.

Pourquoi la précision et la fiabilité de l'évaluation linguistique sont importantes.

Les données d'évaluation et les résultats de compétence sont souvent la base pour :

• Évaluations de la qualité des programmes de langue
• Décisions concernant le financement du programme
• Embauche et promotions du personnel
• Des références telles que les Sceaux d'État et Mondiaux de Bi-alphabétisation
• Crédit universitaire
• Progrès des apprenants individuels

Quelle que soit l'évaluation utilisée, il est essentiel pour les apprenants en langues et leurs programmes de confiance d'être sûrs que les scores qu'ils reçoivent sont précis et fiables. Lorsque diverses évaluations testent toutes les mêmes compétences, qu'est-ce qui les rend différentes ? Ou, qu'est-ce qui rend l'une meilleure que l'autre ?

Les pratiques courantes au sein d'un programme, ou même dans le domaine de l'enseignement des langues, peuvent convenir d'une pratique d'évaluation et trouver ses résultats appropriés. Cependant, les évaluations peuvent ne pas répondre à certaines exigences de précision et de fiabilité de la notation. Si un thermomètre inexact indique que vous avez de la fièvre alors que ce n'est pas le cas, vous pourriez finir par prendre des médicaments pour le mauvais diagnostic.

La précision et la fiabilité sont importantes lorsqu'elles peuvent être déterminantes dans l'attribution d'une certification pour les compétences linguistiques, la décision d'une entreprise d'embaucher, ou si un programme est financé ou non.

Comment pouvez-vous déterminer si les scores sont précis et fiables ?

Recherche récente d'Avant sur l'évaluation des sections d'écriture et d'expression orale des évaluations Avant STAMP démontre comment Avant applique des normes rigoureuses et des contrôles de qualité d'évaluation pour atteindre un haut degré de précision et de fiabilité à travers toutes les 40+ langues que Avant teste. La recherche a examiné les composants suivants:

• Formation des évaluateurs
• Le processus d'évaluation, utilisant des évaluateurs humains et les procédures lorsque deux évaluateurs sont en désaccord sur une évaluation
• Comment le score final est déterminé
• Les mesures statistiques suivantes :
  1. Accord exact
  2. Accord exact + adjacent
  3. Kappa pondéré quadratique (QWK)
  4. Différence moyenne standardisée (SMD)
  5. Corrélation d'ordre de rang de Spearman (p)
  6. 2 STAMP niveaux à part (une mesure de non-accord adjacent)

Ces mesures peuvent être triangulées pour garantir le plus haut degré possible de précision et de fiabilité dans les résultats Avant STAMP.

Les résultats montrent qu'à tous les niveaux, l'évaluation des réponses d'écriture et d'expression orale d'Avant STAMP 4S et STAMP WS est très cohérente. Le Conseil américain de l'éducation (ACE) a effectué un examen approfondi des processus d'évaluation d'Avant, de leur précision et de leur fiabilité. Sur la base de leur examen, l'ACE recommande Avant STAMP pour les crédits universitaires. Pour plus de détails statistiques sur la précision et la fiabilité de l'évaluation d'Avant des réponses d'expression orale et écrite, lisez le livre blanc complet sur la précision et la fiabilité de l'évaluation d'Avant des réponses d'expression orale et écrite de STAMP.

Vérifier l'exactitude et la fiabilité de la notation dans un test de compétence linguistique est d'une importance cruciale lors de l'évaluation de l'adéquation du test pour votre programme. À mesure que les enjeux augmentent pour les tests et la documentation des compétences linguistiques, la question est : pouvez-vous vous permettre de ne pas le faire ?

Articles qui pourraient également vous intéresser :

Découvrez le potentiel de vos programmes linguistiques avec les données Avant STAMPLes données sont une clé de la compétence linguistiqueFiabilité et validité des tests