论文部分内容阅读
评分人反馈信息是保证评分质量的一种重要手段，然而以往的研究对该方法的有效性尚无定论。本研究邀请三位评分人对30篇CET4模拟作文评分，同时提供按重要性排列的三条评分理由。评分结束一周后，评分人收到个性化反馈信息报告，内容包括多层面Rasch模型（MFlKM）的分析结果（严厉度、内部一致性和偏差）以及评分理由的编码分析结果。阅读完反馈信息后，评分人对另外30篇CET4模拟作文评分并提供评分理由。研究发现，反馈信息能加深评分人对评分标准的理解，提高评分人的内部一致性，减少评分理由中的构念不相关差异。