作文自动评价系统在大学英语写作教学中的实证研究
[摘要]作文批改与反馈是英语写作教学的重要一环对提升学生的大学英语写作水平的作用不可低估，以教育部高等学校大学外语教学指导委员会《大学英语教学指南》（征求意见稿）中有关教学模式改革的相关精神为指导，以基于语料库和云计算的句酷批改网为例，通过实证研究探讨自动评价系统在大学英语写作教学中的有效性。研究发现。批改网反馈及时能提高写作反馈成效，减轻教师作文评阅压力，激发学生自主写作热情，提升其写作水平，这是改进现有英语写作教学模式的有效手段。但研究也显示该系统存在一些不足，还需要不断更新与完善，在此基础上为作文自动评价系统的改善提出了一些建议。
[关键词] 自动评价系统；大学英语写作；批改网；反馈；语料库
[中图分类号]G642.4[文献标识码]A[文章编号]10054634（2017）01005705 0引言
近年来我国高校不断扩招，学生人数众多，师资紧张，作为基础课的大学英语普遍采用大班化教学模式，根据国家教育指导委员会2008年的调查，常规本科生与教师的比例
为148∶1[1]。大学英语教师面对庞大学生群体，对学生作文评阅存在任务重、效率低、反馈不及时、主观性强等诸多问题。张雪梅认为由于反馈质量及针对性不强等问题，我国二语写作普遍存在着费时、低效的现象[2]。
教育部高等学校大学外语教学指导委员会在《大学英语教学指南》（征求意见稿）（以下简称《指南》）为大学英语写作教学模式改革指明了方向。《指南》[3]指出“大学英语应大力推进最新信息技术与课程教学的融合，继续发挥现代教育技术，特别是信息技术在外语教学中的重要作用。大学英语教师要与时俱进??在具体的课堂教学设计与实施过程中，融入并合理使用信息技术元素”。作文自动批改系统（automated essay scoring，AES）通过人工智能、网络技术及语料库技术对作文进行自动评价，其发展为基于计算机和网络技术的教学模式改革提供了新的视角。在国外，这种系统已在托福、GMAT、TWE等重大考试的写作评估中广泛使用。国内学者也陆续重视此系统的研究，并自主研发出了一些写作智能反馈平台。如句酷批改网、冰果英语智能作文评阅系统等。
由于计算机自动评价系统在我国投入使用的时间不长，对这些平台的使用效果，国内目前还缺乏系统性研究。本研究拟尝试在《指南》指导下，利用计算机和网络技术，以笔者执教的学生为实验对象，对作文自动批改系统在大学英语
写作教学模式改革中的效果及影响进行深入探析。 1文献综述
1.1国外自动评价系统
所谓作文自动评价系统（AES），就是利用计算机和网络技术对作文进行评估与评价。国外的作文自动评价系统比国内起步早。美国杜克大学于1966年开发出第一套作文自动评价系统PEG（project essay grader）。此后，人们采用统计、自然语言处理及人工智能等方面的最新成果，使该项技术得到了长足发展。目前在国外投入使用且比较成熟稳定的自动评价系统除PEG外，还有IEA （intelligent essay assessor）、 Erater（electronic essay rater）、 IntelliMetricTM、Holt Online Essay Scoring等。PEG比较注重语言形式，IEA则注重作文内容，而Erater既重形式又重内容[4]。IntelliMetricTM、Holt Online Essay Scoring更为先进，能从写作的各个角度，如遣词造句、内容体裁、语体语法、组织结构以及写作格式等分析学生的错误。然而以上评价系统均为英语为母语的学生而设计，对于我国二语习得者，国外现有的研究成果不一定适用，因此将开发符合中国国情的作文自动批改系统提上日程。
1.2国内自动评价系统
国内关于计算机自动评价系统的研究起步较晚，但也取得了一定的成绩。如梁茂成教授团队研发的“大规模考试英
语作文自动评价系统”于2005年申请了国家专利，得到了许多知名学者的肯定。有些企业也开发了此类?件，如句酷批改网及冰果英语智能作文评阅系统。冰果侧重作文整体评价，不指出文章的细节错误，只给出最后得分和评语。目前，国内多所高校正推广使用基于语料库和云计算的句酷批改网（the pigai system），它是一种以SAAS（软件即服务）的方式为教师和英语学习者提供英语作文网上智能批改的系统，具有反馈及时、按句点评、抄袭检测、提供进度报告等优点。
1.3反馈理论
Ur[5]认为反馈在教学环境里通常指为了改进、提高学生的学习效果而对其某一学习任务完成情况发回的信息。在写作领域，反馈是读者向作者提供修改作文的信息。有效的写作反馈能帮助学生发现自己写作中的盲点及不足，促使其对作品进行反省和改进，最终提高写作水平。
国内外学者从不同角度对反馈进行了大量调查研究。根据反馈的来源，反馈可分为教师反馈、同伴反馈以及计算机反馈。有些学者对教师反馈进行了深入探索，相关研究发现教师反馈对学生英语写作水平的提高起着重要的促进作用[67]。同伴反馈与英语写作有着正相关的关系，能够校正学生写作动机，培养批判性思维及分析技能，转变写作态度，提高读者意识，形成学习社群[89]。然而，也有研究者对同
伴反馈提出了质疑，认为由于自身水平的限制，学生对作文表层语法等方面的修改较多，而对深层篇章结构等方面关注较少，因而很少能提供高质量的反馈[10]。
随着科学技术的发展及计算机的普及，教育技术迅猛发展，计算机在语言教学中的作用日益增大。研究者顺应此趋势，提出了网络反馈方法。从网络资源利用、网络背景下的师生互动和写作软件开发应用等方面探讨了网络反馈对写作能力培养的重要作用[1113]。然而，目前国内对作文自动评价系统在大学英语写作教学中的实证研究还不多，且缺乏系统性。 第三，学生也指出了批改网在实际使用中存在的一些问题。（1）评语过于机械化且不够具体。这个结果和一些研究者的发现一致[1617]。句酷网注重对学生作文的拼写、词汇及句法等方面的评价，对于写作的篇章结构、思想内容、逻辑、衔接与连贯性、批评性思维能力等方面反馈的意见较少，这也反映出计算机评价的一大缺陷，即在技术层面上没能像人一样去“欣赏”一篇文章[18]；（2）批改网能指出一些语法结构错误以及学生常犯的“中式英语”，但未给出确切修改意见，学生有时无法自己更正，需要教师给出具体反馈；（3）准确性有待提高。有些学生认为批改网不能准确评价作文的体裁，如学生将作文体裁写错，但仍可能得到较高分数。有些按句点评并未读完整个句子，武断地评价句子错误。因此对于批改网给出的作文分数不可盲目推
作文自动评价系统在大学英语写作教学中的实证研究
