iTEST智能测试平台应用在公共英语无纸化考试中的研究——以芜湖职业技术学院为例

王超

（芜湖职业技术学院，安徽芜湖 241002)

考试，作为对学生知识水平进行测试的一种重要方式，也是高校教学实践过程当中的一个重要步骤。单一笔试已不能适应现代教育对人才能力全面培养的需要。在信息技术不断创新和飞速发展的时代背景下，考试的手段也变得越来越多样，计算机辅助考试(CAT)作为近年来兴起的一种新型考试制度受到越来越多教育界人士的重视和关注。它打破了传统的教学模式，使教师从繁重而重复的教学活动中解放出来，提高了教学质量。结合现有网上测评系统进行开发和运用，为教学提供灵活方便的考试系统成为必然趋势。公共英语无纸化考试是利用现代信息技术在考试方面的创新之举，摒弃了以往作为测试信息载体的纸张，转而充分利用移动电子终端，对学生听说读写译等能力进行考核的考试。在无纸化考试中，常用的系统是基于ITIL 技术构建并运行的英语在线考试系统（简称“iTEST系统”)。该考试系统摆脱了时间和空间的限制，简化了考试流程，节省了大量的人力和资源，尤其适用大范围统一考试。因此越来越多的高校目前逐步应用这一系统。

芜湖职业技术学院（以下简称“学院”)审时度势,引进iTEST 无纸化测试系统并初步使用,取得了良好的效果。学院打破以往传统思维，在2020年大一新生期末统考中采用了iTEST 移动端作为期末考试平台，并取得良好的效果。

1 iTEST测试系统的无纸化测试研究过程

iTEST系统由考生管理模块、题库管理模块、考生成绩分析模块、试卷生成模块组成。采用iTEST 系统进行无纸化测评，测评流程简单、灵活、易于掌握，主要可以分为考前、考中、考后三个环节。

考前，管理员（即上级教务主管部门）导入统考大一新生班级姓名和任课教师，教师随后用工号登录注册并认领自己教学班级，再由任课教师组织所在教学班同学利用学号注册归入各自班级。

其次，由负责教师出题，它是无纸化测试的全部过程中最为重要的步骤。iTEST 系统自带一般大学应用英语AB 级对应教程的题库,但为了适应不同专业不同水平学生考试的需要，学院指定了多位专任教师不断补充、更新题库,根据AB 级考试大纲的要求，录入难度水平相关试题,并且按照新AB 级测试的题型设计包含选择、填空、翻译、写作等多元题型，确保全方位考查学生能力。同时，在线题库测试还能够对学生英语学习有诊断反馈作用，增强考试的公平公正性，激发学生竞争意识，也规避了猜题、押题、漏题等不良风气，对培养学生的自主学习能力和创新能力有着正面引导性作用。

随着iTEST 无纸化测试研究的由浅入深，总结每一次测试得到的反馈，在不断发现问题解决问题的过程中，学院逐渐根据实际情况不断完善题库，同时利用教研会议，定期进行交流经验和方法，以期为将来题库建设提供可供更广阔的思路。题库从刚开始只能满足所有专业统一时间测试，到后来可以根据专业、入学分数、教学层次不同而分别命题,各系部可以根据自身情况从容安排考试时间,在不降低试卷信度的情况下，也确保了考试的公平性。

考中，监考教师只需按照监考表到场维持考场纪律，清点考试人数，省去领试卷核对试卷的烦琐流程。

在考试结束后，系统会自动批改并生成该考生的卷面成绩。待所有试卷主客观题评分结束后，系统会将所有试卷归档，教师就可以查看所在班成绩及各班的试卷分析。

2 iTEST系统的优点

学院自2020年6月份投入使用以来，系统运行稳定、效果良好、学生反馈积极，成效显著、满意度高。实践表明，iTEST 系统在避免学生作弊、节约资源、降低成本、降低老师重复工作量、提高改卷效率和正确率方面优势明显[1]。

2.1 有效预防学生作弊，增强考试严肃性、公平性

针对机考作弊问题，iTEST 利用客户端和试卷的横向同级异序来防止作弊。当学生进入考试后，系统页面最大化，除了答题以外，考试无关的操作将会被屏蔽掉。例如，打开搜索引擎、查找答案、查词典等。针对手机客户端替考、切屏的问题，iTEST系统新增了签署考前承诺书并对学生进行认证，考中对动态抓拍的考生图像进行对比，确保考生身份一致性。后台管理员可以在开始过程中全程监控，超过合理切屏次数，系统会在考生页面自动提示，当达到一定次数，自动判为作弊。试卷的横向同级异序则是通过从多套试卷的同一部分中抽取不同的题目来组合，增加试卷随机性，考场前后左右试卷均不相同，从“千人一卷”变成“千人千卷”，从根本上杜绝考试舞弊。

2.2 无纸化机考既节约了资源，又降低了成本

在启用iTEST 系统前，学院一直采用传统纸质考试。每年面临着大一新生期末统考的巨大压力，南北校区15 个二级学院，6 000 多名考生，将近200 个考场。出卷、试卷装订、试卷发放、监考、阅卷、存档环环相扣，牵一发而动全身。对考务人员而言，考试过程中既要防止学生作弊，又要确保考后每一份试卷答题卡的回收，一旦出现差错，将会造成教学事故，这在无形中增大了任课教师非教学工作量。iTEST无纸化考试系统的引入，出卷老师只需要录入题库，系统自动组卷，从而免去了试卷印刷、保存、派送、分发等各环节。同时也节约了大量的纸质资源。考试过程中学生无须准备任何文具，iTEST 系统可以实现答题数据一分钟保存一次，本地和服务器双重存储，确保数据安全不遗失。

2.3 减轻教师工作量，阅卷的速度和准确度得到提高。

公共英语考题通常由主观题和客观题组成。针对客观题iTEST系统采用机器读入考试数据比照题库事先输入答案评分的方式。系统通过网络传输试题数据到后台服务器进行处理，然后将处理结果传送至客户端。客观题部分对照输入的答案自动评分，相较于传统的答题卡，评分误判率大幅度下降的同时，评卷速度大幅上升。在翻译、写作部分，系统则综合运用了AI 智能预评分和人工给分。单一的人工评分方式不可避免存在较大的主观性，评价学生英语水平缺乏客观性，且受主观因素的制约，易发生错判或者漏判的情况，对考生造成很大的困扰。iTEST 可以实现听说读写译全题型的智能评阅，在写作批改方面，系统会调用iwrite 2.0 智能批改引擎提供内容、语言、篇章、结构和技术规范四个维度的专业评价，以及基于学生作文的总体评价反馈和智能批改。iwrite2.0首创了基于联想词库的内容评价方法，可以实现对学生写作的切题性和连贯性进行评价，从而有效识别跑题和言之无物的作文，在翻译题方面iTEST 利用内置的智能评估引擎来进行评分，可以实现从语言质量和翻译质量两方面对译文进行评估。从使用的效果来看，受到老师一致好评，为人工给分提供了准确的参考依据。试验前后数据表明，从考试结束到教务系统登记完全部学生的分数的时间，在采用无纸化考试前，平均要2 周，在采用无纸化之后平均仅需7 天。并且录入教务系统后，要求修改成绩，统计错误的情况大大减少[2]。

2.4 评价更加科学，提高了教学质量

在采用iTEST 系统前，英语测试后主要采用形成性评价的方法，但由于技术手段比较落后，需要任课教师对大量的数据进行搜集、分析和加工，造成评价过程的困难，评价结果的信度和效度不高，因此，许多教师不愿意进行形成性评价。iTEST 无纸化测试系统具有成绩统计和试卷分析，双维度、多方位的专业数据统计分析功能，对教学和测评研究起到辅助作用。在成绩统计方面，系统有基于考试的最高分、最低分、平均分、最高分标准差等多方位的专业数据统计，同时提供针对整体考试学生的成绩分布，饼图能够帮助教师方便快捷地把握学生整体成绩的分布情况。

在试卷分析维度，系统提供了基于题目的难易度分析以及基于试卷的难易度分布表，还提供了基于选择题题型的干扰项分析，这些维度能够帮助任课教师及时把握考试难度、试题质量，掌握学生情况，提高了评价的效度和信度，从而有针对性地指导教学，并可基于数据开展测评研究，为学院公共英语实行分层教学提供有力的数据支撑。

无纸化考试的实施，客观上倒逼教师掌握更先进的教学手段，当意识到其优点后，能更好地利用并提高其教学质量。对学生而言，参加无纸化考试，对其个人素质也是一种提升[3]。

3 iTEST系统在应用中遇到的问题及解决方法

首先，数字题库的构建和维护。试题库建设的质量在很大程度上决定了试卷的质量，同场考题之间难易度能否相当、考题有没有很好的区分度、试卷的信度和效度。试题库应具有足够的试题量和多样化的特点，包括写作、听力、阅读、翻译、词汇结构和口语等不同类型的子题库，不仅仅是题目的堆积，也包括按考试分类的子题库，构建如AB 级试题库和大学英语四级试题库。随着办学方向的调整，试题库还应与时俱进、不断调整，添加新题、删除过时题型，既能保证测试质量，又可降低人力成本[4]。

其次，英语机考对教师和学生的计算机应用能力提出了更高要求。从教师主体来看，部分教师的系统操作熟练程度还有待提高，考试前教师需操作一整套系统流程：认证后进入系统，认领班级、生成班级码、学生输入班级码加入班级、将班级与系统进行关联、命题组卷、发布班级考试、学生参加考试、结束考试、开始阅卷、结束阅卷、开始归档等。整套流程比较复杂、烦琐，且每一步的选择、设定需精准到位，否则无法进入下一环节，并且在具体操作过程中极易出错，因此一些教师产生了畏难情绪。对此，系统提供方多次组织了教师的考前系统使用培训，教授机考实施方法，并组织微信群，第一时间协助教师解决操作时遇到的困难，增强教师运用机考系统的能力。此外教务部门联合学院共同完善了与无纸化考试相关制度、纪律、要求，从制度层面上进一步保证了考试的顺利进行。

从学生主体来看，部分学生在观念上仍停留在传统纸笔考试阶段，对无纸化考试重视不足[5]。如：无故缺席模拟考试、对考试流程一知半解、不熟悉考试操作界面、不习惯在屏幕上阅读、对电脑屏幕长时间的视觉疲劳、不熟悉键盘输入作文等，都影响了学生的考试成绩。学院考前会安排任课教师统一讲授学生端的操作方法，并利用系统题库，按照期末考试题型指导学生，让学生适应在屏幕前答题，进而化解学生考试时易产生的紧张、焦躁、忧虑等情绪，让学生正确看待无纸化考试的形式与作用。

再次，iTEST 系统主观题阅卷准度尚待提升。当前iTEST试题库试题单选，阅读是一种客观题型，计算机依据事先给定的答案，可以对客观题进行准确无误的批改。但考试中的写作与翻译都是主观题型，尽管iTEST 系统已运用其人工智能软件自动批改主观题、给出分数，但教师反映实际考试中翻译与作文机器批改后的成绩与实际情况出入较大，最后还要阅卷人手动打分，主观与客观题加起来，才能得出考生的最终得分。所以，系统提供方也需要对系统进行进一步的改进以提供信度效度更高、能精确批改英语各类型试题的iTEST系统,让其能更好地服务于考试。

最后，利用iTEST 系统实现无纸化机考硬件需要完善的校园无线网络系统，以及系统提供商软件系统，这些因素具有很大的不可控性，比如在考试中出现、无线网络瘫痪、停电、服务器访问量过大而瘫痪或软件系统中毒无法工作等，只能依靠专业技术人员来维护问题，很难在短时间内恢复正常的考试。一旦在大规模考试中出现上述问题，就会直接影响整个考试，甚至全校的考试安排都会受到影响。这一切相关软硬件，前期都需要大量资金投入，后期的维护也需要资金和人力，这绝不是某一部门一己之力可以完成，需要学校给予大量支持。对此学院联系教务处、信息化建设与管理处、系统提供方多方联动，保证设备的日常维护，在考前对参考教师进行培训，进而辐射到所任课班级。每一次考试前，都会对系统服务器进行模拟压力测试，从而确保正式考试的万无一失。

4 结束语

2020 年6 月，学院应用iTEST 系统经受了一次巨大的挑战，来自全国13个省、市的6 300名大一学生在同一时间，采用难度相当的不同试卷完成了公共英语课期末考试，第一次向全体教师展现了“互联网+”的优越性。2022 年初，iTEST 系统在芜湖职业技术学院的应用已经趋于成熟，仍然高效、平稳地完成了全院的公共英语考试。无纸化测评受到广大教师和全校学生的认可和喜爱。通过两年多来的不断学习和摸索，以iTEST 系统为载体的无纸化测试体系已初步形成，这是芜湖职业技术学院在公共课程考核方式上既充分结合了自己的特色，又运用现代化手段进行了大胆的改革与创新的成果，在iTEST系统日益得到更加广泛应用和功能更加丰富的今天，我们将继续完善并创新测试理念，实现iTEST 系统在学校公共英语教学中的深度整合，充分发挥该平台在促进学生听力、阅读和写作能力提升方面的作用，促进大学英语的改革和发展。