论文部分内容阅读
全国硕士研究生(非英语专业)英语入学考试(以下简称NETEM)是一项全国统一实行的英语水平测试(proficiency test)。该考试的目的是测量学生的语言能力,为各高等学校和科研机构择优选拔人才提供依据。这项考试的阅读部分是历年的重点,05年分值已增至60%,阅读试题的质量是整个试题质量的关键。
效度作为衡量语言测试质量的重要因素之一,指的是“证据及理论对包含在所提议的测试使用之中的测试分数解释的支持程度”(邹申2005∶185)。就阅读测试而言,试题的构想(construct)被认为是阅读能力的构成部分(邹申等2002∶19)。因此阅读测试的效度(validity)即通过测试分数解释学生阅读能力或应用分数来衡量学生阅读能力的合适性的程度。纵观相关测试学文献,鲜有对该项考试效度检验的研究,本研究拟达到以下四个目的:
第一、通过对阅读过程及阅读能力的研究回顾、对该项考试的定位以及对考生英语水平的界定,论证该项考试的阅读部分应该检测的阅读能力。只有明确了考试欲测的能力范畴,才能为考试设计和效验工作(validation)提供理论依据。
第二、使用2005年NETEM的阅读试题组织测试实验,设计四类问卷,检验NETEM阅读理解部分的表面效度(face validity)、内容效度(content validity)、构想效度(construct validity)和标准参照效度(criterion-related validity)。
第三、根据以上效验的结果,设计NETEM阅读理解部分的样本试题,并再次组织测试实验,检验该样本试题的效度。
第四、根据以上的理论论证和效度检验的结果对现行的NETEM的试题设计及实施提供建议,从而达到改善该项考试的初衷。
研究的结果显示:NETEM考试大纲并未能对需要检测的阅读能力进行很好的界定,这点影响了该部分的内容和构想效度。通过对实验数据和问卷结果的分析得知,现行的考试中多项选择题的内容效度和构想效度很低,不适宜检测高水平英语阅读理解能力;2005年选用的选择搭配新题型的难度、区分度指标也未能满足要求;实行多年的英汉翻译题型不能很好的考查对文章结构、段落结构和句间结构的理解,更多的检测了考生的翻译能力。此外,通过分析,NETEM阅读试题和GUCAS2005年学位英语考试阅读成绩之间存在有意义的相关,但相关系数较低(0.27),这证明NETEM阅读试题的同期效度不高;通过类似的处理得知NETEM2004和该学位英语考试成绩之间不存在有意义的相关,这证明NETEM2004的预期效度非常低。然而,通过对学生问卷一的分析,该考试阅读部分的表面效度较高。
建立在以上论证分析之上,笔者提议在现行的试卷结构中增加几种新题型,如:简答题、摘要写作和正误判断等等,并安排了各类题型的分值比例,据此设计了一套可在NETEM中实施的阅读理解样本试题并组织了测试实验。数据显示,该样本试题的各项效度优于现行的NETEM阅读试题。
文章最后总结了效度检验及分析论证的结果并为改进该项考试阅读部分提出了建议。