大数据挖掘与文化价值发现子课题中学清华

清华大学外文系张文霞2014年12月27日课题背景课题名称：“语言大数据挖掘与文化价值发现”（负责人：周建设教授）子课题：“语言智能系统教育实证与文化价值发现研究”实施路径：智能系统（数据）教育实证/文化价值发现（数据挖掘）智能系统主要内容数据研究测评教学研究对数据进行分类—分类的标准学校：优质校、普通校（？）区域：发达、贫困程度：初中、高中研究对数据进行分析挖掘学生作文：横向分析、纵向分析批改网反馈：各方面反馈所占比重、学生对反馈的接受文本修改：分析学生文本的修改（将作文和反馈相结合）内容特点（function,sociolinguistic

knowledge)研究分析学生作文—横向分析（分析不同学生作文）文章长度：字数句子：句子长度、难易度；无错句（error-freesentence， 主要是没有语法错误）词汇：词汇多样性、分级词汇分布、搭配其他：研究分析学生作文—纵向分析（分析同一学生作文）第一稿与第二稿，第二稿与第三稿…第一稿和终稿文章长度、句子结构等的变化稿件的变化，学生的进步，机评的作用研究分析批改网反馈—各方面所占比重层面：词汇、短语、句子、段落等表层(surface)：不会使意义发生变化（如标点、词汇、句子结构等）意义(meaning)：会导致意义的变化(Faigley

&

Witte,1981)研究分析批改网反馈—学生对反馈的接受情况是否接受了(批改网)反馈接受了多少，有什么特点(即学生的修改，下一节详细讲)拒绝了多少，有什么特点，为什么拒绝研究分析学生文本的修改（将作文和反馈相结合）表层：标点，词汇，句子结构等意义：是否发生了意义上的变化比较教师反馈（教师在批改网上给学生的反馈）和批改网反馈，以及学生的修改根据The

Falvey(1993)taxonomy分析学生的修改修改的类型（type

of

revision）增加 删除替代重新措辞扩展合并重新排序修改的层面（level

of

revision）符号等 单词短语从句句子段落修改的功能（function

of

revision）语法 措辞连贯不必要的表达意思更明确测评批改网分数的效度批改网和教师打分的一致性批改网总分和分项分数的相关性批改网分数与学生水平的相关性测评批改网可能出现的效度问题效度有待提高的方面不能反映学生的真实水平的原因有时候，越改分数越低无法处理文章的内容测评批改网和教师打分的一致性批改网和教师给同样的作文打分，看是否一致一致：批改网的分数信度高不一致：分数的可信度测评批改网总分和分项分数的相关性批改网总分与分项（词汇、句子、篇章结构、内容）分数哪个分项对文本质量的预测力最强、哪个最弱测评批改网分数与学生水平的相关性批改网分数与高、中、低（英语）水平学生/不同分数段学生对哪一类学生来说，批改网分数的效度较高如：若批改网的分数能真实反映低水平学生的写作水平，则老师可以把这些同学的作文交给批改网。如：批改网的分数不能真实反映高水平学生的写作水平，则老师需要干预。有的放矢，提高效率教学总结学生修改的规律，发现他们常犯的错误。在教学中重视学生常犯的错误。例如：批改网能统计分析本班学生该次作业的问题，找出高频错误；分析学生的修改，找出他们修改的规律（preference）；分析学生选择忽略的反馈，分析原因。总结学生接纳的反馈类型，在教学中予以借鉴。教学根据前面的数据分析结果，确定如何利用批改网，如何将批改网和教师反馈相结合如：将低分段学生的作文完全交给批改网；批改网和教师合作批改高分段学生的作文小结批改网提供的数据可用于英语写作课堂/程教学、研究、评测等多方面；按需求可建立本校的数据库，多角度研究，数海淘金；动态的数据构建和使用过程，且建且用且增，受益无限。课题任务数据采集（同题作文：分省–全国；研究对象的基础信息）项目研究（调研、文本分析、比较研究、能力建模）课题目标基于大数据的英语（EFL）写作能力模型（特点、量表等）基于大数据的英语（EFL）写作能力诊断、评测、指导教学智能系统（平台）参考书目Bachman,

L.

and

Palmer,

A.

2010.

Language

Assessment

in

Practice.Oxford:

Oxford

University

Press.Faigley,

L

&

Witte,

S.