¿Son Precisos y Confiables los Datos de su Evaluación de Idioma?
El valor de las habilidades lingüísticas está aumentando.
Tanto los aprendices como los educadores están descubriendo que las personas que pueden demostrar competencia en más de un idioma mejoran sus posibilidades de obtener admisión a la universidad, conseguir un buen trabajo y aumentar su potencial de ingresos. La evaluación es el medio más eficiente para determinar la competencia.
Cuando confías en una evaluación de competencia lingüística, ¿cómo sabes que sus resultados son precisos y confiables? Resulta que, no todas las evaluaciones son creadas iguales.
Por qué la precisión y la fiabilidad en la evaluación del idioma importan.
Los datos de evaluación y los resultados de competencia suelen ser la base para: ...
- Calificaciones de calidad del programa de idiomas
- Decisiones sobre la financiación del programa
- Contratación y promociones de personal
- Credenciales como los Sellos Estatales y Globales de Bilingüismo ...
- Crédito universitario
- Progreso de los aprendices individuales
Independientemente de qué evaluación se utilice, es esencial para los estudiantes de idiomas y sus programas de confianza estar seguros de que las calificaciones que reciben son precisas y confiables. Cuando varias evaluaciones están probando las mismas habilidades, ¿qué las hace diferentes? O, ¿qué hace que una sea mejor que la otra?
Las prácticas comunes dentro de un programa, o incluso dentro del campo de la enseñanza de idiomas, pueden acordar una práctica de evaluación y encontrar sus resultados adecuados. Sin embargo, las evaluaciones pueden no estar cumpliendo con ciertos requisitos de precisión y fiabilidad en la calificación. Si un termómetro inexacto indica que tienes fiebre pero no la tienes, puedes terminar tomando medicación para el diagnóstico equivocado.
La precisión y la fiabilidad importan cuando pueden ser decisivas para otorgar una credencial de habilidades lingüísticas, la decisión de una empresa de contratar, o si un programa recibe financiación o no.
¿Cómo puedes saber si las puntuaciones son precisas y confiables?
Investigación reciente de Avant sobre la calificación de las secciones de Escritura y Habla de las evaluaciones Avant STAMP demuestra cómo Avant aplica estándares rigurosos y controles de calidad en la calificación para lograr un alto grado de precisión y fiabilidad en todas las más de 40 lenguas que Avant evalúa. La investigación examinó los siguientes componentes:
- Entrenamiento de evaluadores
- El proceso de calificación, utilizando evaluadores humanos y los procedimientos cuando dos evaluadores no están de acuerdo en una calificación
- Cómo se determina la puntuación final
- Las siguientes mediciones estadísticas:
- Acuerdo Exacto
- Acuerdo Exacto + Adyacente
- Kappa ponderado cuadrático (QWK)
- Diferencia Media Estandarizada (SMD)
- Correlación de Orden de Rango de Spearman (p)
- 2 Niveles Aparte STAMP (una medida de acuerdo no adyacente)
Estas medidas pueden ser trianguladas para garantizar el más alto grado posible de precisión y fiabilidad en los resultados de Avant STAMP.
Los resultados muestran que, en todos los niveles, la calificación de las respuestas de escritura y habla de Avant STAMP 4S y STAMP WS es altamente consistente. El Consejo Americano de Educación (ACE) ha realizado una revisión exhaustiva de los procesos de calificación de Avant, su precisión y fiabilidad. Basándose en su revisión, ACE recomienda Avant STAMP para créditos universitarios. Para obtener más detalles estadísticos sobre la precisión y fiabilidad de la calificación de Avant de las respuestas de habla y escritura, lea el informe completo sobre la precisión y fiabilidad de la calificación de Avant de las respuestas de habla y escritura de STAMP.
Verificar la precisión y fiabilidad de la calificación en una prueba de competencia lingüística es de vital importancia al evaluar si la prueba es apropiada para su programa. A medida que aumentan las exigencias para las pruebas y la documentación de habilidades lingüísticas, la pregunta es: ¿puede permitirse no hacerlo?
Artículos que también te pueden interesar: ...
Descubre el Potencial de Tus Programas de Idiomas con los Datos de Avant STAMPLos Datos son una Clave para la Competencia LingüísticaFiabilidad y Validez de los Test
