概要写作评分量表研究:开发研制与效度验证

来源 :上海外国语大学 | 被引量 : 6次 | 上传用户:john0620
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
“读写结合”英语写作任务考查学生在阅读的基础上完成相关写作任务的能力,因其更具测试真实性而受到越来越多的重视和关注。作为“读写结合”写作测试的重要一员,概要写作已为国内外诸多大规模高风险英语考试所采用,如托福、英语专业四、八级考试(2016年起)、上海英语高考(2017年起)等。但在实际阅卷中该写作题型所采用的评分量表大多均在理论分析和专家判断的基础上形成,基于考生数据和实际测评表现的评分量表比较匮乏;此外课堂形成性评估中亦缺乏可用于学生互评或自评的概要写作评分量表。有鉴于此,本研究拟研制吻合概要写作测试构念,科学规范、简便易施的教师版、学生版评分量表,并多角度地分别对其进行效度验证。在评分量表研制阶段,本研究首先通过以下途径征集和取概要写作文本特征:(1)研读文献,深入挖掘概要写作测试构念;(2)分析现有考试中的概要写作评分标准;(3)采用问卷直接征集;(4)邀请8名教师对2篇概要写作样本自由撰写评语;(5)将征集的文本特征以李克特五级量表的形式向325名高校英语教师征求意见;(6)结合问卷结果和专家判断最终确定20条文本特征为概要写作评分标准的述语。其次,利用SPSS和AMOS软件对问卷调查的结果分别进行探索性和验证性因子分析,确定评分标准共由5个评分维度组成:语言准确度、衔接连贯度、忠实源文度、语言复杂度及写作规范度。通过多元回归分析和专家判断确定上述各评分维度的分值权重分别为25%、25%、20%、20%、10%。根据上述研究结果,本研究拟定了教师版概要写作分项式评分量表,并在此基础上拟定用于同伴互评的学生版评分量表。考虑到学生的语言能力和认知水平,与教师版评分量表相比,学生版评分量表的述语剔除了有关术语,内容更加直白易懂;各维度均采用五点量表而非教师版中的分数段模式,以期便于学生的评分决策。在效度验证阶段,本研究采用多层面Rasch模型分析、相关分析、独立样本T检验、有声思维及半结构式访谈等多种方法对教师版、学生版评分量表进行效度验证。整体而言,两个评分量表措辞清晰、方便操作、切合实际,区分度好,能切实保障评分员内部宽严度的一致性。教师版评分量表的不足在于评分量表各维度每个等级均由分数段构成,评分员在评分决策时会出现主观臆断,随意使用分值的现象,而学生版评分量表由于采用了五点量表则有效规避了这一缺陷。此外,教师评分员一致认为应当升“忠实源文度”的分值比重并放宽认定学生抄袭源文的标准。相关分析、独立样本t检验结果表明评分员自身英语水平并未对评分结果产生显著影响,在概要写作同伴互评量表引导下的评分结果比较可靠,具有较高的信度,该评分量表具有一定的实际意义和推广价值。最后,根据效度验证的结果,本文对两个评分量表有针对性地做了修改和调整。综上所述,学生版评分量表是在教师版评分量表基础上的继承和发展,二者在实际应用中均展现出较好的效度。尽管如此,评分量表的开发研制、效度验证和润色修改是不断发展和变化的动态过程。本文亦在研究发现的基础上归纳出评分标准开发和效度验证的操作化模型,以期为有关各种层次概要写作乃至其他英语写作题型评分量表的实践和研究供一定的借鉴和参考。
其他文献
电信业作为国民经济的基础产业、战略产业和先导产业,将电信业纳入到营改增范围,具有重要的战略意义。而税负作为影响产业发展的重要因素,其变动情况既是衡量税制改革对企业
随着科技的不断发展,计算机在各行各业都得到了广泛的应用,尤其在机械设计中更是如此。计算机辅助设计为机械设计带来了技术革新,运用计算机技术可以改善产品的设计精度,缩短
对空间复杂曲线机器人轨迹规划问题进行了研究.通过Solid Works软件提取三维模型上焊缝曲线的IGES数据文件,将曲线分为直线、圆弧、有理B样条曲线形式;建立曲线路径点离散算
对宜宾市现有库存粮食品质全面调查分析 ,就如何提高储粮质量进行了探讨
目前,我国"走出去"企业属地化发展存在一些问题。比较突出的问题有:融资未实现属地化、人才聘用未实现属地化、企业文化融合困难、产业链属地化发展无绩效等。我国"走出去"企
在前人研究的基础上,对聚醚砜中空纤维膜制备过程进行较系统的讨论,针对聚醚砜(PES)浓度、添加剂种类、溶剂种类、填充液、以及凝固浴等制膜条件,综述其对PES中空纤维膜性能
本报讯 (记者 章映) “乐清出了南怀瑾这样的国学大师啊!”“原来姜伯驹是苍南人。”……昨天上午,在市图书馆举办的世界温州人著作展上,前来参观的市民不时发出惊讶的低呼。此次
报纸
2017版《普通高中生物学课程标准》将发展学生的生物学核心素养作为课程宗旨,生命观念是学科核心素养4个要素中独具生物学学科特点的维度,是学科核心素养的标志和关键。生命
阅读是高中英语教学的的重要内容之一。因此,如何提高学生的英语阅读能力和兴趣已成为英语老师研究的重要课题。英语作为重要的信息载体,是渗透国民经济和人类生活各个领域中
自1878年法国福果案至今,反致制度一直是国际私法学界争论不休的问题。国内外学者对于反致有完全肯定,部分肯定和完全否定三中态度,而肯定或者反对的理由也大同小异。本文意