分题选择完形填空和集库式完形填空对比研究

04年第1期(总第64期)大教WENJUAOZIUIAO分题选择完形填空和集库式完形填空对比研究朱赟(南京邮电大学外国语学院,江苏南京210046摘要:本研究通过定性和定量研究,分析比较全国大学英语四六级考试中的常用完形填空题型——分题选择完形填空和集库式完形填空。结果表明,两者都能够有效測试岀考生综合运用语言的能力。冋时,集库式完形填空相对较难,但区分度较好。试卷命题者应按考试目的设计不冋的完形填空題型。关键词:分题选择完形填空集库式完形填空综合语言能力、引言二、研究方法完形填空最初称作完形程序( Cloze procedure),是由W.(一)研究对象L Taylor于1953年发明的,利用格式塔心理学( Gestalt Psy为了方便取样,笔者选取了南京邮电大学一年级四个hology)中有关“补全心理”的理论和自然语言中的冗余信教学自然班共135名本科生参加实验,他们分别来自电子科息,人为地将一个完整的文本通过各种不同的删词方法进学与工程学院、材料科学与工程学院、光电工程学院。行分解,要求被试利用冗余信息提供的关于语法、句法(二)研究工具汇、语意、搭配、语篇、语用逻辑及情景等各方面的帮助,完成研究工具包括三个部分:分组水平测试完形填空测试对熟悉的句子、语篇的恢复完形。最初人们用完形填空试和问卷调查。题只是为了测量语言材料的可读性和受试者的阅读理解能1分组水平测试力,后来发展成用于测试综合语言能力的试题。为保证调查对象随机性强及实验数据更具有说服力,在我国现行的各类大规模考试中(如全国研究生入学笔者将所教的四个教学自然班级分成AB两大组。由于专业考试、中国英语等级考试等),完形填空是深受广大出题者人数不同,因此两个组的人数不同,其中A组74人,B组61人青睐的最常见的重要题型之一。目前,常用完形填空题型实验一周前对这些学生进行了一次测试,试卷的难易要分题选择完形填空和集库式完形填空。分题选择完形填度适合受试学生当前的英语学习水平。试卷结构主要包括空是最传统、使用最广泛、最具代表性的一种测试方法,而听力、阅读理解、词汇和语法,以及作文。测试结束后,运用集库式完形填空是较新的完形填空的一种变体形式。社会科学的统计软件SPSS软件对数据进行分析处理,得出杨惠中和威尔(Weir)(1999:19)在《大学英语四表1、表2。级考试效度研究》一书中,将四六级考试中的完形填空部表1两组受试学生的测试分数描述分和试卷其他部分作了内部相关分析:只要短文选得合适,组统计量题目设计得好,完形填空(这里指分题选择完形填空)能分组人数均值标准差均值的标准误有效地测试出考生综合运用语言的能力2。那么,集库式完形填空是否也能有效地测试出考生综合运用语言的7448.548.083能力?它是否和分题选择完形填空具有相同的难度和区得分B650.66799分度?表2两组受试学生的测试分数独立样本t检验目前国内对分题选择完形填空和集库式完形填空的对方差方程的Levene检验均值方程的t检验比研究相对缺乏,只有何莲珍(1999)和郭丽(2010)对集库式完形填空阅读理解的测试能力进行了研究实验。何莲珍差分的95%(199:102)提出:“作为阅读理解测试的一种形式,集库式完均值标准误置信区间(双侧)差值差值形填空比分题选择完形填空具有更高的效度,集库式完形填下限上限空是一种具有较高效率的阅读理解测试方式。”3郭丽(2010)母/差相等/367,546|-15201331-2.151.391-4.867,6认为集库式完形填空在很大程度上测试的是较低层次的语假设方-1.522128.617,131-2.1151.390-4.865.635法能力4。本次实验拟对这两种完形填空的测试能力、难度和区分度做进一步研究,以便给英语教学和语言测试提供表1显示,A组的平均得分为48.54,略低于B组的平均得教学实践研究131,大于显著性水平.05,说明两组间的得分差异没有达到表4集库式完形填空的成绩和分组水平测试总分的成显著水平,即两组受试学生的英语综合水平相当,属于平行绩相关性分组,符合实验需要相关性2完形填空测试组水平在本次实验研究中,笔者选取了1995年1月全国大学英集库式语四级水平考试中的一篇阅读理解原文。测试采用的分题PearsoN相关性分组水平选择完形填空和集库式完形填空基于原文,由具有多年教测试总分显著性双侧)学经验的教师改写而成。删去的词都是信息负荷量较大的Pearson相关性实词,这样的实词更能有效测出学生的真实水平集库式显著性双侧)考虑到集库式完形填空的效度,为了强化干扰,可供选择的词项大于空缺的数量。因此,除了从原文中删除10个单*在01水平(双侧)上显著相关词,又另加5个英语实词,这样可供选择的15个词项全部列从表3可以看出:分题选择完形填空与分组水平测试的出来,它们一起构成小词库置于文本段前,要求受试学生从成绩在01水平(双侧)上相关性显著,显著性系数为000<该词库中选择适当的词放回原文的10个空格处。01。表4显示:集库式完形填空和分组水平测试的成绩在01为了保证和集库式完形填空的考点一致,且所删除的水平(双侧)上相关性显著,显著性系数为005<01。由此可词及位置完全相同,这次的分题选择完形填空题只有十个知,这两种形式的完形填空和分组水平测试的成绩都具有空格,每个空格为一题,均提供四个选择项,其中只有一个显著相关性。也就是说,如果受试学生在分题选择完形填空正确答案,其他三个是干扰项。或集库式完形填空中得到高分,那么他在英语测试中的总3调查问卷分就高;反之亦然。根据以上的数据,不管是分题选择完形为了配合这次实验,进一步了解学生对集库式完形填填空还是集库式完形填空,测试结果与综合语言水平考试空的认识和态度,在测试后对参加集库式完形填空的学生的结果都高度相关,都能够有效地测出受试者的综合能力做了问卷调查即测试考生“综合运用语法和词汇的能力、逻辑思维的能三)实验数据收集和分析方法力”,因此完形填空是一种综合性的全面测试语言运用能力测试结束后,共回收有效试卷135份,收回有效调查问卷的题型。70份。分题选择完形填空和集库式完形填空所有试题采用客(二)难度和区分度比较观评分法,评分标准一样,答对一题得1分,答错一题则扣1分,在不同的完形填空测试中,受试学生的成绩是否会因不写答案不得分。由于所选的题型全部是客观题,因此得分不为完形填空形式的不同而受到影响?笔者将A组受试学生在受人为因素的影响,评分合理,不存在任何的主观倾向。所有分题选择式完形填空的成绩和B组在集库式完形填空的成学生的测试成绩输人电脑,通过SPS软件进行分析,包括皮尔绩进行分析比较,并且对完成集库式完形填空测试的受试逊相关分析、独立样本检验,同时对学生的问卷进行分析。学生进行了问卷调查三、结果与讨论表5分题选择式、集库式完形填空的平均成绩(一)综合语言测试能力的比较组统计量《大学英语四级考试大纲》指出:“完形填空部分的目的是分组人数均值标准差均值的标准误测试学生综合运用语言的能力。”即理解篇章和使用词汇和语分题式法的能力。那么,分题选择完形填空和集库式完形填空是否都B集库式744.731.968能有效测试出综合语言能力?为了回答这个问题,将A组受试学表6多项选择式、集库式完形填空平均成绩独立样本生在分题选择完形填空的成绩、B组受试学生在集库式完形填检验空的成绩分别和他们在分组水平测试的总成绩进行相关分析表3分题选择完形填空的成绩和分组水平测试总分的Levene检验均值方程的t检验成绩相关性差分的95%均值标准误置信区间相关性(双侧)差值差值限上限组水平分题选择测试总分形填空差相等876,173-304133,00-.975.321-1.609-341l3.83132.639.002-.975316-1分组水平显著性(双侧人数根据表5和表6可以看到:A组受试学生在分题选择完形填空中的平均分(570)高于B组受试学生在集库式完形填空分题选择显著性(双侧)完形填空中的平均分(473)。为了进一步研究受试学生在不同完形填空中得到的平均成绩是否存在显著性差异,以平均成绩为04年第1期(总第64期)大教WENJUAOZIUIAO173>05,方差齐性。在独立样本t检验中,t值为-3.041,双侧t单词,第一个空格的答案甚至是十五选一,因此受试学生的检验的显著性概率为003<01,说明分題选择完形填空和应试技巧(猜测、排除法等)的应用会受到一定的限制,加大集库式完形填空中的平均成绩存在显著性差异。学生在选择的难度。其次,集库式完形填空如果填错一个,就有可分题选择完形填空的卷面得分普遍高于集库式完形填空能涉及其他答案,即一题答错,至少两题受到牵连。再次,受的得分。试学生中有37人(52%)认为集库式完形填空这种题型容易进一步分析可以看出,学生完成集库式完形填空(1.968)引起他们的紧张和焦虑情绪。因此,在做题时,他们的注意的标准差均大,在完成分题选择完形填空(1.706)时普遍较力容易分散,不利于理解全文,得分受到一定的影响。小。标准差是用来度量各数据偏离平均数分散程度情况的但是,有些学生即使不能理解原文甚至对原文产生错标准差越大,代表大部分数值和其平均值之间差异越大;标误理解,也能够通过应试技巧选出合适的选项,并不影响准差越小,代表这些数值和其平均值之间差异越小,较接近他们得分。因此,分题选择完形填空的得分并不能完全真平均值。因此,在分题选择完形填空中,受试学生的得分相实反映学生对原文的阅读理解,这在一定程度上影响了它对集中,区分度较小;而在集库式完形填空中,受试学生的的效度。得分相对分散,和平均值相差较大,区分度较高。综上所述四、结语受试学生的成绩会因为完形填空形式的不同而受到影响分题选择完形填空和集库式完形填空都能有效测试出(三)问卷调查综合语言能力。但是,由于它们的难度和区分度不同,教师受试对于分题选择完形填空和集库式完形填空这两种和试卷命题者要针对不同的测试目的,采用不同形式的完题型有什么样的看法呢?当被问到“和分题选择完形填空相形填空。如果是为了考查学生对所学知识的掌握情况,就可比,我认为集库式完形填空的难度更大”时,根据收回的70以采用分题选择完形填空,因为这种题型更容易被学生接份参加集库式完形填空测试的受试学生的有效问卷,统计受,减小考生对考试的恐惧心理和焦虑情绪,增强学生的自结果见表7。信,溦励他们在考试中最大限度地发挥能力。如果是选拔性表7集库式完形填空的难度测试,则可以采用集库式完形填空这种难度较大的题型。当完全同意同意不清楚不同意完全不同意然,在测试中,尽量把不同形式的完形填空结合使用,尽量减少不同形式的完形填空对不同水平受试者的影响,以便百分比(%)44.321使测试具有良好的测量能力,更有效地测试出受试者的语言能力。对于集库式完形填空的难度,表7显示完全同意的受试学生有20人,占总人数的286%,同意的有31人,占总人数的参考文献:44.3%。也就是说,大多数的受试学生(729%)认为集库式完1]张玲,韩慧传统完形填空与C-试题的效度对比硏究形填空的难度更大。只有214%的受试学生不同意集库式完J]新疆教育学院学报,2005(3):63-66形填空的难度大[2]杨惠中,C.Weir大学英语四、六级考试效度研究[M为什么受试学生会认为集库式完形填空的难度大于分上海:上海外语教育出版,199题选择完形填空呢?[3]郭丽集库式完形填空效度研究[].中国外语,2010从问卷调查中的回答了解到,受试学生之所以认为分(7):70-76题选择完形填空简单,是因为首先,从接触英语以来,他们4]何莲珍.分题选择完形填空与集库式完形填空的对就经常做分题选择完形填空,对于这种形式更加熟悉;其比实验[J]浙江大学学报,1999(6):97-102次,在做题时,他们可以采用一些应试技巧,如猜测、排除法[5]大学英语四、六级标准考试设计组大学英语四级考等提高得分率,这些应试技巧与文章的理解无关。而在集库试大纲[M]上海:上海外语教育出版社,2006式完形填空中,首先,由于每个空格没有直接提供四个选项[6 Taylor, WCloze procedure: a new tool for measuring供受试学生选择,他们必须从15个选项中选出10个正确的 readability Journalism Quarterly,195330:415-433