Is Your Language Assessment Data Accurate and Reliable?는 정확하고 신뢰할 수 있는가요?
언어 능력의 가치가 증가하고 있습니다.
학습자와 교육자 모두가 두 개 이상의 언어에 능통함을 입증할 수 있는 개인이 대학 입학을 획득하고, 좋은 직업을 확보하며, 그들의 수입 잠재력을 높일 수 있는 기회를 향상시킨다는 것을 발견하고 있습니다. 평가는 능력을 판단하는 가장 효율적인 수단입니다. ...
당신이 언어 능력 평가에 의존할 때, 그 결과가 정확하고 신뢰할 수 있는지 어떻게 알 수 있을까요? 사실, 모든 평가가 동일하게 만들어지는 것은 아닙니다.
왜 언어 평가의 정확성과 신뢰성이 중요한가.
평가 데이터와 능력 결과는 종종 다음을 기반으로 합니다: ...
- 언어 프로그램 품질 평가
- 프로그램 자금에 대한 결정
- 직원 채용 및 승진 ...
- ...와 같은 자격증, 예를 들어 국가 및 전세계 양언어 능력 인증서
- 대학 학점
- 개별 학습자의 진행 상황
어떤 평가가 사용되든, 언어 학습자와 그들이 신뢰하는 프로그램이 받는 점수가 정확하고 신뢰할 수 있는 것이 필수적입니다. 다양한 평가가 모두 같은 기술을 테스트할 때, 그것들을 다르게 만드는 것은 무엇인가요? 또는, 하나를 다른 것보다 더 좋게 만드는 것은 무엇인가요?
프로그램 내에서나 언어 교육 분야에서 일반적인 관행은 평가 방법에 동의하고 그 결과를 적합하다고 판단할 수 있습니다. 그러나, 평가가 특정 평가 정확도와 신뢰성 요구사항을 충족시키지 못할 수도 있습니다. 정확하지 않은 온도계가 당신이 발열을 가지고 있다고 표시하지만 실제로는 그렇지 않다면, 잘못된 진단에 대한 약을 복용하게 될 수 있습니다.
언어 능력 인증의 수여, 회사의 채용 결정, 또는 프로그램의 자금 지원 여부 등 결정적인 요소가 될 수 있을 때 정확성과 신뢰성은 중요합니다. ...
점수가 정확하고 신뢰할 수 있는지 어떻게 알 수 있을까요? ...
최근 Avant에서 진행한 STAMP 평가의 쓰기 및 말하기 부분에 대한 평가에 관한 연구는 Avant가 어떻게 엄격한 기준과 평가 품질 검사를 적용하여 Avant가 테스트하는 40개 이상의 언어 전체에서 높은 정확성과 신뢰성을 달성하는지 보여줍니다. 이 연구는 다음 구성 요소를 검토하였습니다:
- 평가자 교육
- 인간 평가자를 사용하는 평가 과정과 두 평가자가 평가에 대해 동의하지 않을 때의 절차
- 최종 점수가 어떻게 결정되는지
- 다음의 통계적 측정치들:
- 정확한 일치
- 정확한 + 인접한 일치
- 제곱 가중치 카파 (QWK)
- 표준화된 평균 차이 (SMD)
- 스피어만 순위 상관 관계 (p)
- 2 STAMP 레벨 차이 (비인접한 일치의 측정)
이러한 조치들은 Avant STAMP 결과의 정확성과 신뢰성을 최대한 보장하기 위해 삼각측량할 수 있습니다.
결과는 모든 수준에서 Avant STAMP 4S와 STAMP WS의 작문 및 말하기 응답 평가가 매우 일관되게 나타났음을 보여줍니다. 미국 교육위원회 (ACE)는 Avant의 평가 과정, 정확성 및 신뢰성에 대해 광범위한 검토를 수행하였습니다. 그들의 검토에 따르면, ACE는 대학 학점을 위해 Avant STAMP를 추천합니다. Avant의 말하기 및 작문 응답 평가의 정확성 및 신뢰성에 대한 더 많은 통계적 세부사항은, Avant의 STAMP 말하기 및 작문 응답 평가의 정확성 및 신뢰성에 대한 전체 백서를 읽어보세요.
언어 능력 테스트에서 평가의 정확성과 신뢰성을 검증하는 것은 테스트가 귀하의 프로그램에 적합한지 평가할 때 매우 중요합니다. 언어 기술을 테스트하고 문서화하는 데 대한 요구가 증가함에 따라 질문은 다음과 같습니다: 하지 않을 여유가 있습니까?
당신이 좋아할 만한 기사들: ...
Avant STAMP 데이터로 언어 프로그램의 잠재력을 발견하십시오데이터는 언어 능력의 핵심입니다테스트의 신뢰성과 타당성
