MOOC同伴作业互评中反思意识与学习成效的关系研究.docx

《MOOC同伴作业互评中反思意识与学习成效的关系研究.docx》由会员分享，可在线阅读，更多相关《MOOC同伴作业互评中反思意识与学习成效的关系研究.docx（19页珍藏版）》请在优知文库上搜索。

1、摘要同伴互评是MooC中经常采用的一种教学活动。为了帮助学习者自信地对他人作业做出客观公正的评价并促进自我反思，课程团队会提供作业反思框架，即评价量规，希望学习者在使用评价量规撰写评语的过程中不断加深对课程教学目标的理解,通过观摩评议同伴作业促进自我反思。但教学用意未必所有学生都能够领会并落实，MooC中有多少学习者在作业互评过程中具有反思意识、反思意识程度如何、反思意识与学业成效之间是否存在关联，是本研究感兴趣的问题。通过对“教师如何做研究MOOC课程中79287条同伴互评数据进行深入分析后发现：在自然无干预的状态下，大部分学习者有一定的反思意识，但撰写的评语质量还有待提升;成绩合格者的评语

2、长度和评语质量与学习成效呈现显著正相关，这表明同伴互评的评语长度及质量可以作为学习成效的预测指标。研究在使用定量方法对MOOC学习者评语数据进行教学意义分析方面作了一些方法尝试，可为后续研究提供参考。关键词：MOOC;同伴互评;反思意识;评语字数;评语质量;学习成效一、问题的提出同伴作业互评是MOOC中常用的一种社会建构学习活动，学习者需要根据课程团队提供的评价量规，对多个同伴的作业进行批改。在这个过程中，学习者不仅可以加深对教学要求的理解，促进自我反思1,还可以因观摩他人作业而取长补短，丰富观点和见识。己有研究表明，学习者参与同伴互评能够提高他们的学习成绩、激发学习动机2-4。例如：“教师如

3、何做研究”这门MOoC课程中就有学习者表示非常喜欢这个活动，认为“原以为自己己经做得很好了，却看到了别人更出色的作业。对于被评价者来说，高质量且与被评价者相关的评语对其学习起到正向促进作用5,对于评价者来说，写评语的过程可以提升其批判性思考等高阶思维能力6。虽然作业评语是“同伴作业互评”活动中提升学生学习质量的关键要素，但并不是所有学习者都能够意识到认真写评语的意义，所撰写的评语也并不都是有针对性的。在一项对3034条同伴互评评语进行文本编码分析的研究中，研究者发现：多数学习者撰写的评语内容都不涉及对作业的修改建议，即使提出了修改建议，这些建议通常也是不具体的或者难以操作。在“教师如何做研究M

4、OOC课程中也有学习者反映：同伴并没有根据评价量规对作业进行评价;评语内容单薄，只有几个字，对后续修改无指导价值;等等。我们随机抽取了300条“教师如何做研究MOOC课程的同伴作业互评评语，按照字数由少至多的顺序排序后发现：学习者所写的评语长度不一，有些评语寥寥几字（如“很好“厉害”很有收获），有些评语长篇大论（字数高达上千字）；评语质量差异也很大，部分评语能够根据评价量规给出具有建设性的修改意见，但也有部分评语看不出与作业评价量规的关联。可见，并不是所有MOOC学习者都能够意识到评价量规实际提供了反思的框架，也不是所有学习者都能够根据评价量规撰写评语。那么，有多少MOOC学习者在参与同伴互评

5、过程中具有反思意识或进行了审辩思考?由评语表达出的反思意识的强弱与学习成效之间是否有相关性?对上述问题的回答，将有助于增进我们对MOOC学习者学习特点的认识，相关发现也可以用于优化MOOC作业互评活动设计。二、研究设计本研究希望通过对MOOC作业互评活动中作业评语的研究，确定MOOC学习者在参与同伴作业互评过程中的反思意识强度，研究分析反思意识强弱与学习成效是否存在关系。（一）研究数据来源为保障本研究数据分析的有效性，本研究在样本选择上有以下几点考虑：一是同伴互评任务要具有一定狂杂度，如果同伴互评任务过于简单，那么学习者撰写的评语内容和修改建议极易雷同;二是同伴互评的评价量规不能过于单一，否则

6、学习者撰写的评语同质性也会很高，同质性会大大压缩评语的可分析空间;三是为了排除学习者对评价内容理解程度的差异对学习者所撰写的评语内容的影响，所选择分析的同伴互评活动最好是在课程后期进行的，一般来说，参与课程最后一周同伴互评的学习者基本都坚持学习了课程的所有内容，这部分学习者已经了解并掌握了课程的知识点,他们对于评价量规的熟悉和理解程度可视为同一水平。根据上述考虑，本研究将研究样本确立为一门面向大中小学教师的研究方法培训MOoC“教师如何做研究，该课程共有五周教学内容。学习者在学完五周所有内容后需要根据模板撰写一份研究申请报告，作为作业提交并参与同伴作业互评，每个人至少要评6份作业。评价量规共有

7、6个维度，分别是研究题目、研究关键词、研究背景、研究内容、研究过程和研究创新点和成果。表1列举了该作业同伴互评活动的评价量规。学习者根据评价量规给出每个维度的得分后，平台将自动计算总分（每个维度去掉最高分和最低分后取平均分，然后计算各个维度的平均分之和获得作业总分，满分15分），同时，学习者还需要在文本框内给出相应的评语，课程团队要求学习者能够根据评价量规进行评价，但平台本身对学习者提交的评语内容和评语字数无任何限制。表1同伴互评活动评价量规评价雄度不合格合格A好优秀。分I分2分3分研究越口（2分）研究ISu像口号,或杼不是教彼够完成的研究.或并不是研究.是做愣雷要修改法本合格.商明,直接.清

8、峰研究为履词（2）没写关艇词.或/53个关犍词都不合适只有I个关逑网秘有2个以上关It网合适研究背景（3分）没有说明为什么鬟做研究.或者这个研究不太可能取得什么价值研究有些价（ft,但没有相关研究介捆研究较布价值.且介IR了相关的理论和相关研究.但叁考文献不妙AS1.不卷多研究何鹿很叠妥,相关研究分析湎*.参看文或典Iafl相关研究内容（3分）没“提出研究Me.只说饕做什么.没行说研究什么提出了研究问时研究问题的分X不合理.awn：4100OOOn110000.111000111100、111110111111),以此表示所有评语与评价量规之间的吻合度。例如：IlOOOO就表示该评语内容和评价

9、量规中的前两个维度匹配，与后四个维度不匹配。2 .学习成效本研究用学习者最后的课程成绩作为学习成效的操作性定义。这是因为本文研究的是自然无干预状态下MooC学习者在进行作业同伴互评时的自然表现，我们的基本假设是：在自然无干预状态下，MOOC学习者同伴互评活动中的表现是其一贯学习行为和态度的体现，与其学习成效之间会有一定的关联，课程成绩就是学习成效的结果体现。本研究曾考虑过用学习者提交互评的作业成绩作为学习成效，但后来发现影响MOOC学习者作业成绩的因素很多，一方面MOOC学习者程度差异很大，互评成绩未必能够反映学生作业的真实水平，另一方面MoOC学习者有给同伴作业打高分的现象，图2为课程作业的成绩与给分人数的统计，可以看出：确实有给高分的倾向，所以单一的MooC互评作业成绩作为学习者的MOOC学习成效不太具备解释性。10520M29575M3S4M3MDOO2000MDoOISOOOIO(XX)VOO图2作业分数(横轴卜与给分人数(纵轴)直方图那么这是否意味着MOOC同伴互评活动不可用呢?对于“教师如何做研究”这门课程，互评作业的教学目的有