基于语料库的TEM-8阅读语篇句法复杂性研究

贾星星

（长安大学外国语学院,陕西西安 710061）

一、引言

全国高等学校英语专业八级考试是国内一项专门为英语专业学生设计的大规模标准参照考试[1]，对英语专业在校大学生学习听、说、读、写等多项技能以及英语实际运用能力进行准确且全面的评估，因此对英语专业学生学习有重要作用。自1990年以来，英语专业八级考试已经走过了三十多个春秋，历经数次改革，其阅读理解的分数权重在不断提升，2015年，该权重达到了30%（2014年该比例仅为20%）[2]占专八总分数近1/3。根据《高等学校英语专业英语教学大纲》：考生需能够阅读英语国家的社论以及书评类文章；能够对难度相当于《中国英语等级量表》6-7级的文学作品进行评论和分析；考生能从所读材料中把握主旨大意、辨别事实细节、理解字面和隐含意义、进行判断和推理、分析思想观点、语篇结构、语言特点和修辞手法；掌握复杂的句法知识，拥有较强的篇章理解能力，在较短时间内获取到信息，因此阅读篇章测试的难度成为出题人着重考虑的因素，为了提升试卷阅读部分的测试效度，阅读理解难度需要控制在一定区间；因此对于专业英语八级阅读篇章的句法复杂度进行探究就显得尤为重要，可帮助试卷设计者合理设计考卷；亦可帮助英语专业教师掌控阅读篇章的难度，指导学生有针对性的备战英语专业八级考试。

近年来，对于英语考试的研究可分为：对于考试的设计以及改革的思考[3]、英语考试各类题型解题以及考试对于教学的反馈[4-5]，这些研究主要以受试群体比较广泛的高考或全国大学英语四、六级考试为研究材料，而基于英语专业四、八级考试的研究则相对稀少。基于英语专业四、八级研究重要集中在阅读领域，如阅读内容效度[6]、篇章解读技巧[7]和阅读视角[8]，但从测试学角度进行篇章的研究却屈指可数。只有贺麟茜通过基于语料库的方法对比了2006-2012年间英语专业八级和雅思阅读篇章的词汇复杂度、句法复杂度、文本可读性、篇章衔接与连贯[9]，然而该研究年代久远；研究语料局限在2006-2012年间，对于近年尤其对2015年英语专业八级大纲更新过的试题缺乏一定的指导和借鉴意义。鉴于此，笔者自建封闭语料库对2011-2021（2020年因疫情取消）10年内的英语专业八级阅读篇章从测试学的角度进行探究英语专业八级考试阅读文本的句法复杂度，并以雅思学术阅读文本为参照语料库，旨在为考试提供效度依据，为英语专业八级考试出题人、英语专业教师以及备考学生提供借鉴和参考。

二、研究设计

1.研究语料

本研究中使用的语料选自2011-2021年间英语专业八级考试阅读理解文本，共计35篇，共27841形符；所有的语料在收集过程中进行预处理：仅保留阅读理解部分；剔除文档中的冗余信息：如题目和词汇中文释义；将所有处理过的文档保存为纯文本格式并导入语料库检索软件Lаnсsbоx（http://соrpоrа.lаnсs.ас.uk/lаnсsbоx.）计算类形符。参照语料库中的语料均选自雅思阅读文本模块（学术类），由于雅思与国际公认的语言能力标准CEFR对接[2]，因此两项考试的对比研究可为制定高效度的英语专业评估提供参考。为保证语料库的同质性，参照语料库中的语料亦选自2011（剑8）—2021（剑15），共计96篇；为排除样本量对研究结果的影响，笔者采取分层抽样的方法在各个系列中随机抽取了4篇，共计32篇阅读文本作为本研究的参照语料库，共26936形符。

2.研究工具

本研究拟采用Kylе开发的句法复杂度分析工具TAASSC[10]，该软件包括陆小飞开发的软件L2SCA测量的参数[11]。研究需要，只选用其内嵌的传统的L2SCA中的14个指标作为文章句法复杂度的测量依据，这14个句法复杂度指标主要分为五大类：语言单位产出长度（平均句子长度MLS，平均T单位长度MLT；平均子句长度MLC）、整体句子复杂度（C/S）、从句（T单位从属子句数量DC/T；复杂T单位比率CT/T；从属子句比率DC/C；每个T单位中的子句数量C/T）、并列结构（从句中并列短语数量CP/C；T单位中的并列短语数量CP/T）以及特定短语结构数量（子句中复杂名词性短语数量CN/C；T单位中复杂名词短语数量CN/T；T单位中的动词短语数量VP/T）。笔者用软件TAASSC运行得到各类指标的数据后，利用SPSS 25做数据的正态性检验，符合正态分布的指标进行独立样本T检验，对于不满足正态性的数据采用曼-惠特尼U检验来揭示两个样本的句法复杂度是否存在显著性差异。

三、结果和讨论

1.产出单位长度

表格呈现了雅思阅读语篇和英语专业八级阅读文本在句子平均长度、从句平均长度以及T单位平均长度指标值的对比结果。从表中可以看出，在雅思阅读文本中，三个长度指标均值分别为23.74，21.01，11.65，三个指标均显著高于英语专业八级阅读语篇，即雅思阅读文本的句子更长，这可能由于两考试阅读语篇长度所致，雅思学术阅读语篇的平均长度为842字符，而英语专业八级阅读理解篇章平均长度为795字符，低于雅思学术阅读，这说明MLS、MLT、MLC三个指标为“不同的建构，从不同的角度衡量语言长度”[12]，同时也表明产出单位长度是区分雅思阅读语篇和英语八级阅读文本的可靠指标。

2.整体句子复杂度

句子整体复杂度在雅思阅读文本的句子复杂度均值为C/S=2.01，高于英语专业八级阅读文本C/S=1.93，无显著性差异，不是区分雅思学术阅读和英语专业八级阅读的有力指标。（句法复杂度指标见文末表1）。

表1 句法复杂度指标

3.从属结构

从属结构的4个指标在雅思阅中的均值分别为DC/T=0.73，DC/C=0.40，CT/T=0.51，C/T=1.77，其中DC/C与DC/T这两个指标显著高于英语专业八级文本，是区分雅思阅读和英语专业八级文本从属结构的稳定指标。研究表明，DC/T是区分改写文本等级的强力指标，在高水平读者的阅读文本中，指标DC/T较高[13]，表明英语专业八级阅读文本实质上难度略低于雅思阅读文本。指标CT/T以及C/T在两个考试中不具有显著性差异，这一发现与徐鹏得出的结论相反，他发现C/T是区分CET-6阅读语篇与雅思学术阅读文本的稳健指标之一，T单位中的从属从句数在CET-6阅读语篇中显著高于雅思学术阅读文[1]。造成这种差异的原因可能由于研究材料的异质性，全国大学生英语六级考试是针对中国在校大学生进行英语综合应用能力的评价。研究表明C/T是区分不同水平学习者的强力指标，与低水平学习者相比，高水平学习者在信息表达以及语言产出中使用从属结构来增加信息负载量，而CET-6作为全国在校非英语专业大学生的英语综合能力评价，其阅读文章包含大量的从属结构来考查学生对于该句结构的掌握情况；然而英语专业八级考试作为全国英语专业最高级别英语综合能力测试，其考生在经过专业的学习和训练后，对于从属结构更加了解和熟悉，因此，与国际化的雅思相比专八阅读篇章的C/T不具有显著性差异。

4.并列结构

并列结构的3个指标值的均值在雅思阅读篇章中分别为CP/C=0.28，CP/T=0.49，高于专业八级文本英语专业八级文本，但并不显著，p=.99（CP/C），p=.589（CP/T），p=.353（T/S），均大于.05，说明英语专业八级阅读文本与雅思阅读篇章相比在并列结构的使用上并无二致，也进一步表明他们并不能作为区分雅思阅读和英语专业八级文本并列结构的稳定指标。

5.特定短语结构

特定短语结构在英语专业八级篇章中的均值分别为CN/C=1.33，CN/T=2.15，VP/T=2.07，显著低于雅思阅读篇章，说明特定短语结构使用可以作区分雅思阅读语篇和英语专业八级阅读篇章的强力指标。雅思阅读中使用大量的名词性短语结构以及名词化语法隐喻[1]等句法手段对文本中的信息进行高度凝练与概括，来增加文章难度。

结论

本研究从测试学的角度采用基于语料库的研究方法，试图揭示英语专业八级阅读篇章的句法复杂度特征，并以雅思学术阅读模块中的阅读材料为参照。研究表明，英语专业八级阅读文本无论是在从属结构还是并列结构使用上与雅思学术阅读都保持良好的一致性，这从侧面说明英语专业八级在阅读出题质量上把控较好，是国内英语专业高级别测试的典范。本研究对于测试学有一定的借鉴和启示作用，虽然英语专业八级考试作为全国英语专业最高水平的测试，但其句法复杂度与国际英语水平测试雅思相比，在语言产出长度、整体句法复杂度、特殊结构短语方面仍旧存在显著性差异，英语专业八级考试出题人员可以提升阅读长度，选择信息压缩度较高的文章，以此来考查考生的信息识别能力和篇章理解能力。