英语口语机器评分和人工评分的对比研究

摘要：

本研究对比了讯飞口语自动评分系统和人工评分员对206名学生的朗读、复述和口头作文三类口试任务录音的评分结果,发现机器对朗读的评分偏高,对复述的评分偏低,评分结果与人评结果的一致率和一致性较低,机器对这两类任务的评分存在显著的偏差;机器对口头作文的评分与人工评分比较接近,两者的一致率和一致性均较好;机评和人评的内部一致性均比较稳定,但机评与人评以及人工评分员之间的严厉度均有显著的差异.这些结果可以对口语自动评分算法和技术的优化和完善提供参考,也对现有的评分模式具有一定的启发.

关键词：口语测试、自动评分、人工评分、评分一致率、评分一致性

所属期刊栏目：37

分类号：H319(英语)

资助基金：本文为国家教育考试科研规划项目“口语考试的计算机自动评分研究”编号:GJK2017039

在线出版日期：2020-11-13（万方平台首次上网日期，不代表论文的发表时间）

页数：共7页

页码：57-62,105