TEM4阅读任务语篇输入及预期回答分析

来源:用户上传      作者:

　　 摘  要：文章以2016年改革后的三套TEM4阅读试题为研究对象（2016-2018），以《关于英语专业四级考试（TEM4）题型调整的说明》（以下简称《调整说明》为参照依据，以Bachman和Palmar（1996）的任务特性框架为理论依据，从语篇输入及预期回答特征两个维度探讨改革后TEM4阅读试题的内容效度[1]。研究结果表明，改革后TEM4阅读试题的语篇输入特征与预期回答特征总体上达到了《调整说明》的要求，具有较高的内容效度。但在语篇类型的选取上仍可进一步提高：命题人可适当增大应用文在体裁中的占比，提高对科学、经济、教育等题材的涵盖度。
　　关键词：TEM4阅读测试;内容效度;语篇输入;预期回答
　　中图分类号：G640 文献标志码：A 文章编号：2096-000X（2019）11-0091-04
　　 Abstract： The article takes the three sets of TEM4 reading questions after the reform in 2016 as the research object （2016-2018）， and the "Description of the adjustment of the English majors （TEM4） questions" （hereinafter referred to as "adjustment instructions"） as the reference.The task characterization framework of Bachman and Palmar（1996）is based on the theoretical basis， and discusses the content validity of the post-reform TEM4 reading test from the two dimensions of text input and expected answer characteristics. The results suggest that the reading test enjoys higher content validity. However， further improvement can be made in material selection. Test designers are advised to include more passages of practical genre and passages related to science， economy and education.
　　Keywords： TEM4 readingtest; content validity; discourseinput; expected response
　　 一、概述
　　高校英語专业四级考试（TEM4）是面向全国英语专业本科二年级学生的一项大规模、标准化考试，其权威性与影响力不断扩大，于2010年考生数量已达约27万人次[2]，已成为评估英语专业本科“教与学”的一项重要指标。
　　2015年，外语专业教学测试委员会对TEM4试题的研讨商榷推动了新一轮调整方案的出台，其中阅读测试部分有较大调整：题型从过去单一的选择题调整为客观选择题与主观简答题相组合，题量由20题减少为15题，测试时长由25分钟延长至35分钟，而总分数与权重均保持不变（见表1）[3]。
　　 “考试效度研究项目的实施，对考试的可持续发展具有非同寻常的意义”（邹申，陈炜2010）。[2]。考试效度是指考试达到其预期测试目标的程度[4]。作为效度研究的一部分，内容效度研究旨在检测实际考试内容与考试大纲的吻合度，为考试的改进提供参考。鉴于TEM4逐年递增的影响力和2016年TEM4阅读测试任务的题型调整，对改革后的阅读理解试题进行内容效度研究十分必要。
　　二、文献综述
　　在国内，研讨TEM4阅读测试内容效度的文献很多，但研究样本多为《调整说明》正式实施前的试题，如侯艳萍（2011）[5]、李恩耀（2012）[6]、强亚丽（2014）[7]等。《调整说明》执行后，少数以2016年新大纲样题或真题为研究对象的文献开始出现，如何锡梗（2016）[8]、刘宝全、胡芳芳（2018）[9]等，但以改革后2016-2018年试题为研究对象的文献仍处空缺状态。
　　为对改革后的阅读测试进行更全面的内容效度研究，本文结合《调整说明》，以近三年（2016-2018）的TEM4阅读测试内容作为研究对象，从语篇输入和预期回答两个维度分析其内容效度，以期为试题命制者和考生提供一定价值的参考意见。
　　三、研究设计
　　（一）研究对象
　　本研究收录了近3年（2016-2018）的TEM4阅读理解试题，阅读材料共计9篇文章，包括45道问题（选择题30道，简答题15道）。
　　（二）研究框架与理据
　　如表2所示，本研究以Bachman和Palmar（1996）提出的任务特性框架为理论依据，结合《调整说明》，制定 TEM4阅读测试内容效度的分析框架。其中，语篇输入任务特征主要包括语篇类型（体裁、题材）、阅读速度（总字数、时间）与语言难度（易读度）;预期回答任务特征主要包括回答类型及技能考察。
　　 四、结果与讨论
　　（一）语篇输入特征
　　1. 语篇类型
　　（1）体裁
　　根据《调整说明》，阅读材料应保证体裁设置多样化，需涵盖描写文、说明文、议论文、记叙文、应用文（说明书、图表、广告）等体裁[3]。
　　如表3所示， 改革后阅读试题中议论文与记叙文占比最大，分别为45%和33%;说明文与描写文占比较小，均为11%;应用类文本的占比为零。 　　 可以看出改革后的阅读材料具有较强的多样性，达到了《调整说明》中的选材要求，但仍有继续提高的空间。通常来讲，议论文主要以抽象的思维方式来表达作者的主张与见解，侧重考察考生的思辨能力与批判性思维，的确是测试中不可或缺的体裁。但同时，作为实用性最强的文体之一，应用类文本能对学生检索信息并整合信息的能力进行有效考察。因此，在体裁的选择上，试题命制者可适当增加说明书、图表、广告等应用类文本。
　　（2）题材
　　根据《调整说明》，阅读材料的题材选择应具有多样性，需涵盖文化、社会、科技、学习、常识、人物等题材[3]。
　　如表4所示，改革后阅读试题中人物题材的占比为45%，社会和文化紧随其后，分别为22%和33%。
　　 由此可见，改革后的阅读材料涵盖了社会、文化和人物三种题材，占比相对均匀，符合《调整说明》中的选材要求， 但对科学、经济、教育等题材的涵盖尚有不足，不利于促进考生在学习过程中广泛涉猎不同题材，拓宽阅读面。因此，试题命制者可在题材的选择上稍作调整，进一步拓广题材的涵盖面。
　　2. 阅读速度
　　阅读速度是影响考生阅读成绩的一个不可忽视的因素。《调整说明》对考生的阅读速度也提出了一定要求：TEM4阅读材料总字数可控制在1800字的范围，要求考生每分钟阅读约120个单词[3]。
　　由于考生需要分配一部分时间用于读题并作答，实际阅读时间与考试规定的总时长存在一定偏差。根据杨惠中和Weir（1998）[10]提出的时间比例公式，当阅读任务的回答类型为选择题时，候选人阅读材料的时间与回答问题的时间之比约为1：0.75。据此推算出TEM4考生的实际阅读时长约为20分钟，答题时长约为15分钟。
　　如表5所示，改革后阅读材料的平均长度为1948词，符合《调整说明》中对字数的要求;阅读速度平均保持每分钟98个单词左右，稍慢于《调整说明》中要求的阅读速度。由于阅读测试中有一部分问答题，计算得出的阅读速度存在一定偏差，考生的实际阅读速度应略高于每分钟98词，试题总体符合《调整说明》中的要求。
　　 3. 语言难度
　　《调整说明》要求考生能读懂英美国家出版的语言难度中等的文字材料[3]。易读度，作为测量阅读材料难度的指标，主要用于描述文字材料易于阅读理解的程度，与文字材料的句子长度、语法复杂程度等等紧密相关[11]。
　　本研究应用了Flesh易读度计算公式对2016-2018年阅读试题的易读度进行计算，其参考量表如表6所示：易读度数值和文字材料的难度成反比关系，指数越高，表明阅读材料易于理解的程度越低。
　　 计算结果如表7所示，改革后TEM4阅读材料的平均易读度为63.73，难度介于中等（standard）和略难（Fairly difficult）之间，与《调整说明》中提出的测试要求高度契合，内容效度非常良好。
　　 （二）预期回答特征
　　1. 技能考察
　　根据《调整说明》，从技能考察方面来看，TEM4阅读测试要求考生“掌握材料的主旨大意，理解事实和细节;理解字面意义以及判断和推理;理解单个句子的意义以及上下文的逻辑关系”。[3]
　　据此，TEM4阅读题型可划分为四大类：大意类、细节类、推断类和释义类。其中，大意题注重考生对篇章、段落大意的把握，考察总结概括能力;细节题注重考察考生检索信息与整合信息进行综合判断的能力;推断题注重考察考生对非字面信息的推理判断能力;释义题注重考察考生对词汇短语的语义理解能力。
　　如表8所示，在改革后TEM4阅读试题中，细节类与推断类题型占比最高，分别为38%和36%;大意类与释义类的占比稍低，分别为16%与10%。由此可见，在保持对基础能力考察的同时，改革后的TEM4阅读十分注重对考生推理判断能力的考察，有效地检验了考生对文本的真实理解，也对考生提出了较高的要求。
　　 2. 回答类型
　　根据《调整说明》，TEM4阅读题型采用选择题和问答题相结合的回答类型，不再使用单一的选择题形式。
　　通常来说，选择题的作答有许多应试技巧，猜测、排除法的使用在一定程度上阻碍了考生真实的语言能力的体现，但改革后新增的问答题较好地弥补了这一不足。从表9来看，问答题中推断题占比53%，释义题及大意题占比分别为13%和7%，从而有效地考察了考生的文本理解能力和语言产出能力，保证了试题对考生的阅读理解能力的切实反映。
　　 總体来看，改革后的TEM4阅读任务技能考察比例分布得当，回答类型设计合理;在注重考生推理判断能力与信息提取整合能力的同时，也对考生的总结概括能力和语义理解能力进行了合理考察，表明改革后的试题达到了《调整说明》的要求，具有较好的内容效度。
　　五、结束语
　　研究结果表明，改革后的TEM4阅读试题设计与《调整说明》基本吻合，内容效度较高。从语篇输入角度来看，改革后TEM4的阅读速度和语言难度与《调整说明》高度契合，但在语篇类型的选择上仍有提升空间，试题命制者可在体裁与题材的选择上稍做调整，提高对科学、经济、教育等题材的涵盖度。此外，应用文在往年试题中基本被忽略，而这一体裁具有较好的真实性，建议在今后的试题中适当提高其比例。从预期回答角度来看，改革后的TEM4阅读试题技能考察比例分布得当，回答类型设计合理，减少了考生对应试技巧的依赖，能够对考生的阅读能力进行较为准确的考察。
　　参考文献：
　　[1]Bachman， L. F. & A. S. Palmer. Language Testing in Practice [M].Oxford： Oxford University Press，1996.
　　[2]邹申，陈炜.回顾与展望——写在英语专业四、八级考试开考20周年之际[J].外语界，2010.
　　[3]高校外语专业教学测试办公室.关于英语专业四级考试（TEM4）题型调整的说明[R].2016.
　　[4]王丽红.论提高英语阅读测试效度的方法[J].高教学刊，2016.
　　[5]侯艳萍.近七年英语专业四级阅读理解内容效度评估[J].河北大学学报（哲学社会科学版），2012.
　　[6]李恩耀.TEM4阅读理解测试内容效度分析[J].黑龙江教育学院学报，2012，31（11）：165-167.
　　[7]强亚丽.英语专业四级阅读理解测试（2007-2013）内容效度研究[D].广西师范大学，2014.
　　[8]何锡梗.新考纲下2016年英语专业四级考试阅读理解题的延续与创新[J].宁德师范学院学报（哲学社会科学版），2016.
　　[9]刘宝权，胡芳芳.英语专业四级阅读测试效度研究——以TEM4（2016）新大纲样题阅读任务为例[J].外语电化教学，2018.
　　[10]杨惠中，Weir， C.J.大学英语四、六级考试效度研究[M].上海外语教育出版社，1998.
　　[11]Richard， J. C. et al. Longman Dictionary of Language Teaching and Applied Linguistics[M].Beijing： Foreign Language Teaching and Research Press，2005.
转载注明来源:https://www.xzbu.com/1/view-14846826.htm