作文自动评分系统对学生修改影响

作文自动评价系统对大学生英语作文修改的影响武永清华大学外文系文献综述研究问题研究方法发现与讨论主要内容文献综述1.国外对AWE的研究写作自动评估系统（Automated

WritingEvaluation

System,or

AWE

system）是指能扫描学生作文并对作文进行及时评估的高级软件。2.

国内对AWE（主要是批改网）的研究1.国外对AWE的研究AWE反馈的内容。自动反馈系统只能用来修改作文的形式，如语法、用词和结构，对内容没有帮助(Yang,2004;

Yeh&

Yu,

2004)。也有研究显示，

AWE对文章质量和语言水平有促进作用(Grant&Ginther,2000;

Jarvis

et

al.,

2003;

Yang,2004)。1.国外对AWE的研究对不同学习者的影响。研究表明水平较高的学习者不那么喜欢AWE反馈，AWE反馈对初学写作的人有消极影响，当二语学生在没有老师反馈时使用文字分析软件，会接受分析器的建议，即便这些建议并不合适。(Brock,

1990;

Pennington

&Brock,

1990)。AWE的优势。从教学的角度来说,用电脑评估作文是很合适的，它能和现有的评估方法和策略结合起来，提高反馈频率，拓宽评价技巧（Bull

&McKenna，2004)。使用AWE的问题。Coniam(2009)总结了文献中使用计算机评估学生写作的几点争论：经济成本，时间，客观性，以及需要多名评分员才能得到的与之相对应的信度。自动反馈软件因不完全可靠

(Krishnamurthy,2005)和不遵循教学原则(Chapelle,2001)而饱受诟病。它们采用的统计技术能否为二语写作提供有效反馈还是个未知数(Hearst,

2000)。AWE的作用。很多软件研发者表示电脑反馈只能辅助而非替代课堂教学(Burstein

&Marcu,

2003;Burstein

et

al.

2004)。在课堂上出于教学目的使用

AWE只是对写作教学的补充而非替代(Shermis&Burstein,

2003;

Ware,

2005;

Warschauer&

Ware,2006)。文献综述2.国内对AWE（主要是批改网）的研究AWE反馈的内容。AWE有评阅及时、能识别简单错误、提供相关语法词汇知识的优点（顾成华，王丽，2012；石晓玲，2012），但无法提供正确示例（蒋艳，马武林，2013），部分严重的语法错误还是识别不了，在文章内容和篇章结构方面的反馈不足（张莉，2013）。AWE的打分。AWE评分的信度很高，但评分显著高于教师，不能反映学生真实写作水平，从效度上看，AWE的及时反馈有利于激发学生的写作兴趣、提高写作水平（何旭良，2013）。对AWE的看法。教师们对AWE的态度是积极的，多数人认为该网能减轻自己的批阅压力，应该将机改与人改相结合张燕（2012）。目前关于AWE的研究大都是采用问卷和访谈的方法进行的。本研究：文本分析，采访，反思报告“快乐英语写作”课程为2学分的英语学习提高阶段选修课，16周共完成八个写作任务。目标是训练学生不同体裁的写作技巧，提高英语写作水平。在多种教育技术手段支持下，采用“单周写作，双周评议，期间多元反馈，阶段性反思自评”的

“以评促学”过程化施教方案。研究环境研究背景AWE能提供什么反馈？AWE反馈对文本修改的影响？学生对AWE的看法？研究问题时间研究对象研究方法2014春季学期25名非英语专业本科生文本分析采访反思报告研究方法AWE反馈分数评语按句点评体检报告分数体检报告评语评语（generalcomments）衔接（cohesion）连贯（coherence）结构（structure）词汇（vocabulary）句子（sentence）拼写（spelling）按句点评按句点评（specific

comments）单词词语错误、名词错误、动词错误、连词错误等。短语搭配学习、搭配错误、搭配统计、低频警示等。句子句子错误、句子警示等。按句点评（specific

comments）纠正性反馈词语错误、名词错误、动词错误、连词错误、句子错误、低频警示等。非纠正性反馈搭配学习、学习提示、批改提示等。Taxonomy

for

Revisions

(Falvey,

1993)TypeAddition:

reviser

adds

informationDeletion:

reviser

deletes

informationSubstitution:informationrevisersubstitutesPermutation:informationreviserrephrasesDistribution:

reviser

re-writes

sameinformation

in

larger

chunksConsolidation:

reviser

puts

separateinformation

togetherRe-order:informationrevisermovesSizeSymbol

etc.WordPhraseClauseSentenceParagraphFunctionGrammatical:

to

make

the

textgrammatically

correctCosmetic:

a

change

which

makes

thetext

look

betterTexture:

to

make

the

texture

of

thetext

more

appropriate

for

the

taskUnnecessary

expression:

to

take

awayunnecessary

informationExplicature:

to

make

the

informationin

the

text

more

explicitMechanical:

to

use

correct

mechanicsFigure

1

Size

of

revisions

of

different

sources20%10%0%30%40%50%80%70%60%AWEteacherpeerselfsymbolwordphraseclausesentenceparagraphFigure

2

Type

of

revisions

of

different

sources0%#60%#50%#40%#30%#20%#10%#70%#AWE#teacher#peer#self#addition#deletion#substitution#permutation#distribution#consolidation#reorder#Figure

3

Function

of

revisions

of

different

sources0%#50%#40%#30%#20%#10%#60%#AWE#teacher#peer#self#mechanics#grammatical#cosmetic#texture#unnecessary#explicature#In

which

aspectsAWE

is

usefulNo.(percentage)StatementsVocabulary15(60%)·AWE

provides

me

with

greatest

help

of

usingdifferent

vocabularies.

It

gives

me

some

advancedwords

that

are

the

synonyms

of

the

simple

words

inmy

essay.

I

choose

one

and

look

it

up

in

thedictionary.

It

adds

color

to

my

writing.Grammar20(80%)·Take

grammatical

mistakes

as

an

example.

AWEcan

help

me

figure

out

some

previously

unattendedgrammatical

problems.Reflection4(16%)·At

least

the

feedback

AWE

gives

you

could

forceyou

to

read

your

essay

again

and

reflect

on

it

inorder

to

see

whether

there

are

some

problems

ornot.Technology2(8%)·

Because

sometimes

it

is

hard

for

you

to

find

outall

the

mistakes.

If

you

want

to

identify

themistakes,

you

have

to

read

again

and

again.

But

forAWE,

it

can

detect

the

mistakes

quickly.Mechanics1(4%)·Because

we

do

not

pay

much

attention

to

somedetails

such

as

spelling,

punctuation

when

we

arecomposing

an

essay.优势：擅长查找语言形式方面的问题。培养学生的自主学习能力。不足：在文章的内容和结构方面帮助不大。纠正性反馈（indirect）没有明确告知如