Ваши данные оценки языка точны и надежны?
Значение языковых навыков увеличивается.
Оба учащихся и преподаватели обнаруживают, что люди, которые могут продемонстрировать владение более чем одним языком, улучшают свои шансы на поступление в колледж, получение хорошей работы и увеличение своего заработного потенциала. Оценка является наиболее эффективным средством определения профессиональных навыков.
Когда вы полагаетесь на оценку владения языком, как вы узнаете, что ее результаты точны и надежны? Оказывается, не все оценки создаются равными.
Почему точность и надежность оценки языка имеют значение.
Данные оценки и результаты профессиональной подготовки часто являются основой для:
- Оценки качества языковых программ
- Решения о финансировании программы
- Найм персонала и продвижение по службе
- Удостоверения, такие как Государственные и Глобальные печати двуязычия
- Учебные кредиты колледжа
- Прогресс отдельных учащихся
Независимо от того, какая оценка используется, для изучающих язык и их надежных программ важно быть уверенными в том, что они получают точные и надежные результаты. Когда различные оценки проверяют одни и те же навыки, что делает их разными? Или что делает одну лучше другой?
Общепринятые методы в рамках программы или даже в области преподавания языка могут согласовать практику оценки и считать ее результаты подходящими. Однако, оценки могут не соответствовать определенным требованиям к точности и надежности рейтинга. Если неточный термометр показывает, что у вас есть температура, но ее нет, вы можете в итоге принимать лекарства от неправильного диагноза.
Точность и надежность имеют значение, когда они могут быть решающими при присуждении квалификации по языковым навыкам, решении компании о найме или вопросе о финансировании программы.
Как узнать, являются ли оценки точными и надежными?
Недавние исследования Avant по оценке разделов Письма и Устной речи в оценках Avant STAMP демонстрируют, как Avant применяет строгие стандарты и проверки качества оценок для достижения высокой степени точности и надежности во всех 40+ языках, которые тестирует Avant. В исследовании были рассмотрены следующие компоненты:
- Тренировка оценщиков
- Процесс оценки, с использованием человеческих оценщиков и процедуры, когда два оценщика не согласны с оценкой
- Как определяется итоговый счет
- Следующие статистические измерения:
- Точное согласие
- Точное + смежное согласие
- Квадратичный взвешенный каппа (QWK)
- Стандартизированная разница средних значений (SMD)
- Корреляция Спирмена (p)
- 2 STAMP уровня в стороне (мера несмежного согласия)
Эти меры могут быть триангулированы для обеспечения наивысшей возможной точности и надежности в результатах Avant STAMP.
Результаты показывают, что на всех уровнях оценка Avant STAMP 4S и STAMP WS ответов на письменные и устные задания очень стабильна. Американский Совет по образованию (ACE) провел обширный обзор процессов оценки Avant, их точности и надежности. На основании их обзора, ACE рекомендует Avant STAMP для учебных кредитов в колледже. Для более подробной статистики о точности и надежности оценки Avant ответов на письменные и устные задания, прочтите полный белый доклад об точности и надежности оценки Avant STAMP ответов на письменные и устные задания.
Проверка точности и надежности оценки в тесте на знание языка имеет критическое значение при оценке того, подходит ли этот тест для вашей программы. Поскольку ставки на тестирование и документирование языковых навыков повышаются, вопрос заключается в следующем: можете ли вы позволить себе не это делать?
Статьи, которые могут вам также понравиться:
Откройте потенциал ваших языковых программ с помощью данных Avant STAMPДанные - ключ к владению языкомНадежность и валидность теста
