评价量规设计对慕课同伴互评有效性的影响研究

摘要：

同伴互评是MOOC常采用的学员作业评价方法,但是MOOC同伴互评的准确性和可靠性因学员知识水平程度差异过大而被质疑.为了研究如何通过改进评价量规来提高同伴互评的可靠性和准确性,在教师培训类MOOC“翻转课堂教学法”的两期教学中,我们进行了若干设计研究.研究发现,在教学培训类MOOC的同伴互评活动中,学生评分和教师评分高度相关.细化评分量规的等级描述,以及采用是非选择型的评价量规都能显著提高评分者间信度和评分效度,且评分者间信度与评分效度的差异度与学生所提交作业文档本身的质量也有关系.在研究发现的基础上,文章提出了MOOC同伴互评评价量规的设计原则和使用建议.

关键词：同伴互评、评价量规、设计研究、评分者间信度、评分效度、量规设计原则

所属期刊栏目：39

分类号：G434(电化教育)

资助基金：国家自然科学基金“MOOC数据模型及其对课程与学习评价的效用研究”61472013;国家自然科学基金重点课题“面向课程的大规模在线教育资源组织与持续优化的理论与方法”61532001

在线出版日期：2018-11-16（万方平台首次上网日期，不代表论文的发表时间）

页数：共7页

页码：45-51