（教育技术学专业论文）基于计算机的口语考试中的一些问题的分析及改进方案.pdf

摘要 摘要 基于计算机的口语考试( 以下简称“口语机考”) 相对传统口语考试易于实 施，节约大量人力物力，使大规模的口语考试成为现实。本论文“基于计算机的 口语考试中的一些问题的分析及改进方案”的研究目的是通过对现有口语机考系 统进行研究和分析，找出存在的问题和不足，对系统进行改进设计，使考试更有 效、更容易部署和实施。 本文的主要工作是对现行口语机考系统存在的一些问题进行分析、研究、改 进与完善。作者在实践、实验和分析的基础上发现：1 ) 在调研国内外现有的传 统口语考试、口语机考的现状基础上，指出口语机考引入了新的试题类型，但在 交互方式的真实性上和传统口语考试相比还有差距，差距主要体现在现有口语机 考系统无法进行有效的人人对话。2 ) 作者对现有口语机考系统中的朗读题计算 机自动评分子系统进行了实验，研究自动评分的评分效率和评分效果，结果表明 朗读题计算机自动评分系统评分速度较慢，不利于大规模使用。3 ) 计算机自动 评分系统对录音质量要求较高，如果录音效果较差则不能评阅。4 ) 机房管理人 员考试前需要依次测试机房内每台计算机的耳机和话筒等设备查看其是否可用， 测试效率低。5 ) 部署时需要机房管理人员在每台考试用计算机上手动安装考试 用软件，并设置桌位位置信息，机房规模大时安装的工作量大。在上述分析的基 础上，作者提出了一系列的改进方案：设计了基于自由发言策略的小组讨论题型、 改进计算自动评分、提出使用自动化语音测试替代手动语音测试、考试机自动安 装等。最后，作者对改进方案进行了详细的分析、设计与实现。 改进后口语考试系统实现了考生间可实时交流的小组讨论考试形式，同时在 口语机考系统中引入了摄像头，增加了口语机考的真实感；改进后的自动评分系 统的评分时间相对原系统减少了9 8 ，减少了录音质量过差的情况的发生：对声 音设备进行自动化测试、对考试用程序自动化安装，减轻了部署和实施的工作量。 关键词：计算机，口语，考试 a b s t r a c t a b s t r a c t s i n c e c o m p u t e r - b a s e d o r a l t e s t i n g i s r e l a t i v e l ye a s y t ob ei m p l e m e n t e d c o m p a r i n gt ot r a d i t i o n a lo r a lt e s t i n g i tc a i ls a v eal o to fh u m a n a n dm a t e r i a lr e s o u r c e s t oe n a b l et h el a r g e s c a l eo r a lt e s t i n gt ob e c o m er e a l i t y t h i sp a p e rc a r r i e so u ts t u d yo n t h es o m ep r o b l e m si nc o m p u t e r - b a s e do r a lt e s t i n g t h eg o a lo ft h er e s e a r c hi st o c o n d u c tr e s e a r c ha n da n a l y s i so ne x i s t i n gs y s t e mo fo r a lc o m p u t e rt e s t i n g ，i d e n t i f y p r o b l e m sa n dd e f i c i e n c i e s ，i m p r o v es y s t e mt om a k eo r a lt e s t i n gt ob em o r ee f f e c t i v e a n de a s i e rt ob ed e p l o y e da n di m p l e m e n t e d t h i sp a p e ri sd e v o t e dt ot h ea n a l y s i sa n di m p r o v e m e n to fs o m ep r o b l e m si n c o m p u t e r - b a s e do r a lt e s t i n g 1 ) t h ea u t h o rm a k e sr e s e a r c ho ns t a t u sq u oo fe x i s t i n g d o m e s t i ca n di n t e m a t i o n a lt r a d i t i o n a lo r a lt e s t i n ga n dc o m p u t e r - b a s e do r a lt e s t b a s e o nr e s e a r c h ，t h ea u t h o rp o i n t so u tc o m p u t e r - b a s e do r a lt e s ti n t r o d u c e ss o m en e w f o r m so ft e s t i n g ，b u ti ti s n ta sr e a l i s t i ca st h et r a d i t i o n a lo r a lt e s t i n g 2 ) c o m p u t e r a u t o m a t i cs c o r i n gs y s t e mo fr e a d i n gi st o os l o wt od e a lw i t hl a r g e s c a l ea p p l i c a t i o n ， a n di th a sr e l a t i v e l yh i g he x p e c m t i o n sf o rr e c o r d i n gq u a l i t y 3 ) c o m p u t e ra u t o m a t i c s c o r i n gs y s t e mo fr e a d i n gh a sr e l a t i v e l yh i g he x p e c t a t i o n sf o rr e c o r d i n gq u a l i t y 4 ) t h ea d m i n i s t r a t i v es t a f fo fc o m p u t e rl a bn e e d st o t e s tt h ee q u i p m e n ts u c ha se a c h e a r p h o n ea n dm i c r o p h o n ei nt h ec o m p u t e rl a bt ol o o ko v e rw h e t h e ri t i sa v a i l a b l e ， w h i c hw i l lt a s kal o to ft i m e 5 ) t h ea d m i n i s t r a t i v es t a f fo fc o m p u t e rl a bn e e d st o i n s t a l lt h es o f tf o ra l lc l i e n t sm a n u a l l y , b u ta u t oi n s t a l l i n gw o u l db eb e t t e rc h o i c e b a s e o nt h ea n a l y z i n ga b o v e ，t h ea u t h o rp r e s e n t ss o m es o l u t i o n s ：af r e e t a l kg r o u p d i s c u s s i o n ，a ni m p r o v e da u t os c o r i n gs y s t e m ，a u t oe q u i p m e n tt e s t ，a u t oi n s t a l l i n g f i n a l l y , t h ea u t h o rc a r r i e so nt h ea n a l y s i s ，d e s i g na n dr e a l i z a t i o no f t h es o l u t i o n s t h ei m p r o v e ds y s t e mr e a l i z e sar e a l - t i m ec o m m u n i c a t i o nb e t w e e ne x a m i n e e si n t h eg r o u pd i s c u s s i o nb yi n t r o d u c i n gt h ew e bc a m e r a ，w h i c hi sm o r er e a l i s t i c ；t h et i m e o fa u t os c o r i n gc a nb er e d u c e db y9 8 c o m p a r e dw i t ht h eo l ds y s t e m ，a n dt h es o u n d r e c o r d e di np o o rq u a l i t yi sa l s om o r er a r e l y ；t h ei m p r o v e m e n t sh a sl i g h t e n e dt h e w o r k l o a do ft h ed e p l o y m e n ta n di m p l e m e n t a t i o nb yt h ea u t o m a t e dt e s t i n go ns o u n d e q u i p m e n ta n d t h ea u t o m a t e di n s t a l l i n go ft h es o f t w a r eu s i n gi nt h et e s t i n g k e y w o r d s ：c o m p u t e r - b a s e d ，o r a l ，t e s t i n g n 表目录 表目录 表2 1 传统口语考试试题所含素材类别9 表2 2 口语机考试题所含素材类别9 表2 3 传统口语考试与口语机考所含试题素材类别比较1 0 表2 4 传统口语考试试题类型1 0 表2 5 口语机考试题类型10 表2 6 传统口语考试与口语机考试题类型比较1 1 表2 7 朗读题自动评分机器配置1 4 表2 8 朗读题自动评分性能1 5 表4 1 预评分结果文件结构4 1 v i 图目录 图目录 图2 1 视频会议系统原理图1 3 图2 2 朗读题自动评分流程图1 3 图2 32 0 0 8 级学生朗读试题成绩分布图1 5 图2 4 原口考系统现场考试流程18 图2 5 改进后口考系统现场考试流程1 8 图2 6 监考机主界面1 9 图4 1 自由发言策略小组讨论系统结构图3 0 图4 2d i r e c t s h o w 框架3 2 图4 3 音视频捕捉链路图3 3 图4 4d i r e c t s o u n d 声音播放流程3 9 图4 5 分布式计算机自动评分系统结构图4 0 图4 6 朗读音频预评分流程4 1 图4 7 评分控制模块与最终评分模块交互时序图4 2 图4 8 朗读音频最终评分流程4 3 图4 9 录音质量检测系统结构图4 3 图4 1 0 有较大直流偏移的音频频谱图4 4 图4 1 1 自动化语音测试系统结构图4 5 图4 1 2 考试机位置设定系统结构图4 6 图4 1 3 考试机位置设定系统交互时序图4 8 图4 1 4 服务器端主界面设计图4 9 图4 1 5 客户端主界面设计图4 9 v i i 中国科学技术大学学位论文原创性和授权使用声明 本人声明所呈交的学位论文，是本人在导师指导下进行研究工作 所取得的成果。除己特另, l m 以标注和致谢的地方外，论文中不包含任 何他人已经发表或撰写过的研究成果。与我一同工作的同志对本研究 所做的贡献均己在论文中作了明确的说明。 本人授权中国科学技术大学拥有学位论文的部分使用权，即：学 校有权按有关规定向国家有关部门或机构送交论文的复印件和电子 版，允许论文被查阅和借阅，可以将学位论文编入有关数据库进行检 索，可以采用影印、缩印或扫描等复制手段保存、汇编学位论文。 保密的学位论文在解密后也遵守此规定。 作者签名：鏊墨叠 矽，b 年6 月孑日 第1 章绪论 第l 章绪论 1 1 问题的提出 口语测试作为交际能力测试中不可缺少的一环，受到各国语言测试专家和学 者越来越多的重视( 文秋芳，1 9 9 9 ：5 5 ) 。然而直接采用传统的考官与考生一对 一或两个考官对多个考生施考和主观评分的方法测试成本很高，费时费力，难以 大规模推广。随着计算机技术的普及及其在口语测试中的研究与应用，国内外一 些英语测试开始使用计算机来辅助英语口语测试( 以下简称“口语机考 ) 。中国 科学技术大学从2 0 0 5 年开始使用口语机考( 黄勇，2 0 0 5 ) ，至今已成功举行全校 性的期末口语考试十余次。从2 0 0 5 年开始的t o e f li b t l 考试的h 语部分同其他 部分一样都采用基于计算机的方式进行。2 0 0 8 年开始的全国大学英语考试 ( c o l l e g ee n g l i s ht e s t ，简称c e t ) 机考中也尝试加入了朗读句子等口语试题。 而在全国公共英语等级考试中( p e t s ) 中，低级别的口语机考也在进行试点( 赵 祖华，刘庆思，2 0 0 6 ) 。 研究表明口语机考有可接受的信度和效度，能够有效测试学生的口语能力 ( 蔡基刚，2 0 0 5 ，张燕敏，2 0 0 7 ) 。但口语机考与传统的直接面试型口语考试相 比，参加口语机考的考生的交流对象由考官和其他考生转化成了计算机。大批学 生同时在实验室内参加考试，缺乏交际真实性( 文秋芳，1 9 9 9 ：7 1 ) 。有研究认 为使用计算机进行口语考试很难做到互动，口语考试应该模拟真实语境设计考生 对话、辩论的试题提高考试效度( 邱东林，2 0 0 5 ，李琳，2 0 0 7 ) 。针对这个问题， 研究者将小组讨论题型引入到口语机考系统。传统的小组讨论由考官控制、引导， 使每人都有发言的机会。基于计算机的小组讨论不易控制单个考生的发言时间， 很可能有的考生会滔滔不绝，占据了大部分的讨论时间，而有的考生则没有机会 发言，针对此问题，研究者提出使用申请排队策略实现小组讨论题型( 苗健 2 0 0 8 ) 。但上述申请排队策略跟真实的自由发言的交流环境还是有较大区别。 宋洁( 2 0 0 8 ) 研究了口语机考的评分子系统，肯定了评分子系统在减少评分 者工作量方面的作用，发现了评分者存在快速评分和评分者之间存在评分不一致 等问题，提出了对评分者整体评阅时间和每小题考生录音的播放时间进行监控， 并针对朗读题型引入了计算机自动评分。作者根据这个模型完成了代码编写和部 。t o e f l ( t e s t o f e n g l i s ha sa f o r e i g nl a n g u a g e ，作为外语的英语考试) 是由美国教育考试服务( e d u c a t i o n a l t e s t i n gs e r v i c e ) 举办的为申请去美国或加拿大等国家上大学或入研究生院学习的非英语国家学生提供的一 种英语水平考试。t o e f li b t ( t o e f li n t e r a c t b a s e dt e s t i n g ) 是基于互联网进行的t o e f l 考试。 i 第1 章绪论 署工作，并对3 3 7 1 份朗读题的进行了自动评分。结果发现计算机评分时间过长， 不利于大规模使用。 目前海外英语口试可分为三种：直接面试，半直接面试和间接口试( 文秋芳， 1 9 9 9 ：5 6 ) 。其中，口语间接口试是在语音实验室里进行的没有考官的考试， 把考生的口试表现用录音机录下。由考官在考后反复听磁带录音打分( 文秋芳， 1 9 9 9 ：5 6 ) 。口语机考作为一种新型的口语测试，由计算机取代了录音机的功能， 也应属于间接口试。间接口试的评分可由专业人员统一在方便的时问和舒适的地 方进行，但如果发现考生语言资料不足或录音不清楚，难以进行评分( 文秋芳， 1 9 9 9 ：5 7 ) 。作者在口语机考的应用中也发现了类似的问题，如在有些录音声音 过小，有些杂音过大，有些没有根本就听不到声音。 同时，作者在参与口语机考实施的过程中也发现了另外一些需要改进的地 方，如：耳机、话题等设备容易损坏，需要组织人员在考试前对考试用计算机一 个一个进行测试，费时费力；考试时考生经常在试音时发现的机器有问题，这时 考生就需要等待较长时间，直到下一场次考试开始才能继续考；部署时需要手动 对机房内大量的计算机依次安装学生用的考试程序，机房多的话工作量较大。 综上所述，作者提出以下待研究问题： 问题一：如何改进小组讨论题型交互方式，使口语机考可以更好的模拟真实 语境? 问题二：如何改进计算机自动评分方法，使其更快速的评分? 问题三：如何改进口语机考系统，减少录音质量过差等情况的发生? 问题四：如何改进语音测试方法，减少考务人员的工作量，减少测试失败后 需要考生等待的情况? 问题五：如何改进考试端的部署方式，使其更容易部署? 1 2 研究的内容与目的 本文首先对口语系统中的几个问题进行了分析和讨论：针对口语机考真实感 问题，作者对国内外多种传统口语测试所用的试题题型、交互方式进行调研，同 时对口语机考中的试题题型，交互方式进行总结，分析比较两者问差异，在调研 的基础上指出增加网络摄像头有利于考生实时交流，能更近一步的模拟真实语 境，从而提高测试效度；为了研究口语机考自动评分中存在的问题，作者对中国 科学技术大学2 0 0 8 级一年级学生的2 次期末口语机考共3 3 7 1 份成绩进行自动评 分，发现评分速度较慢、有不少考生评分数据异常，作者通过分析，指出评分数 据异常的主要原因是因为录音质量较差，作者提出可以在正式开始考试前严格测 试考生录音质量，拒绝使用录音不清楚的计算机进行考试；作者对设备测试( 试 2 第1 章绪论 音) 、计算机与座位绑定过程中存在的问题进行分析，提出改进方案。其次，文 章详细分析了的各个改进设计的功能需求、性能需求和安全需求。最后，文章讨 论了各个模块的详细设计与开发过程，并对开发过程中的技术难点进行分析。 作者希望此研究，能使口语机考能更好的模拟真实语境，从而提高1 2 1 语机考 效度，改进口语机考的稳定性和易用性，使口语机考获得更广泛的应用。 1 3 研究的方法 1 ) 文献调研法 调研国内外多种传统口语测试所用的试题题型、交互方式，并与现有口语机 考进行比较。 2 ) 统计分析法 对收集到的3 3 7 1 份口语机考成绩进行统计分析，查看成绩分布，找出其中 存在的问题。 3 ) 实践法 本文提出的分布式评分自动评分、录音音量检测、改进考试流程等方案，已 在系统中实现且成功应用于实际考试中。同时，作者提出的小组讨论实时交流等 模型，己完成方案设计和主要代码编写工作。 1 4 论文的逻辑结构 本文总共分为共五章内容。各章的内容简述如下： 第1 章绪论：陈述本文的研究背景、研究内容与目的、研究方法以及论文 的逻辑结构。 第2 章现行口语机考系统的问题及分析：依次现有口语机考系统中存在的 真实性问题、自动评分问题、设备测试问题、计算机与座位绑定问题等进行分析， 提出改进方案。 第3 章系统改进方案的需求分析：对改进方案进行需求分析，总结方案的 工作流程。 第4 章系统改进方案的设计与实现：结合现有口语系统，从技术角度讨论 方案的具体实现方法。 第5 章结束语：总结本文的成果，指出研究中存在的问题，给后续研究者 提供参考。 第2 章现行口语机考系统的问题及分析 第2 章现行口语机考系统的问题及分析 本章分别对现有口语机考中存在的几个问题：真实性问题、自动评分问题、 设备测试问题、计算机与座位绑定问题进行讨论，指出问题所在，分析问题并分 别给出改进方案。 2 1 口语机考真实性问题 本文所指的“真实性 是指情景真实( s i t u a t i o n a la u t h e n t i c i t y ，如场景、参与 者、内容、语调、种类等) 和交互真实( i n t e r a c t i o n a la u t h e n t i c i t y ，如考生的语言知 识，交际任务等) 。1 3 语是一种交际性很强的语言能力，用计算机评测口语能力， 很难做到互动，缺乏真实感，而传统面对面口语考试在这方面就比较灵活( 邱东 林，2 0 0 5 ，李琳，2 0 0 7 ) 。由于这个原因，口语机考并不能完全反映考生在生活 情境中的语言表达和运用能力，即语言交际能力。下面尝试对传统口语考试和口 语机考进行对比，找出口语机考存在的差距，提出改进方案。 2 1 1 传统口语考试现状 传统的口语考试采用直接面试的方法，需要考官与考生面对面交谈( 文秋芳， 1 9 9 9 ：5 6 ) 。它可以是多个考官对一个学生，也可以是一个考官对一个或多个学 生。考试采用现场打分的方法，有考官当场评定考生成绩。这类考试国内外应用 较为广泛，如香港会考口试、雅思( l t s ) 口语考试、大学英语四六级口试 ( c e t - s e t ) 、剑桥英语交际技能口试、剑桥商务英语证书口试等。下面分别对其 中的香港会考口试、雅思( i e l t s ) 口语考试、大学英语四六级口试进行介绍。 2 1 1 1 香港会考口试 香港会考口试是由香港考试及核评局( 简称考评局，前称香港考试局) 组织 的英语口语能力测试。口试作为英语会考试卷的重要组成部分，主要测试考生的 会话能力。1 2 1 试包括两个等级：香港中学会考( h o n gk o n gc e r t i f i c a t eo f e d u c a t i o n e x a m i n a t i o n ，缩写为h k c e e ，惯称c e ，前称中五会考，相当于国内高二水平，) 和香港高级程度会考( h o n gk o n ga d v a n c e dl e v e le x a m i n a t i o n ，缩写为h k a l e ， 惯称a l e v e l ，前称中七会考，相当于大学预科水平) ( 文秋芳，1 9 9 9 ：5 7 ，香港 考评局) 。采用两个考官一组，每次面试四个考生的方式。 香港中学会考的口试分两个部分：第一部分为朗读与对话，要求考生朗读一 篇文章或对话，然后回答考官对此提出的问题。第二部分为交谈，由考官提出问 4 第2 章现行口语机考系统的问题及分析 题，考生回答。问题一部分和提供的图片有关，一部分是日常生活问题。( 香港 考评局，1 9 9 5 ：1 4 2 ) 每个考生的考试时间为5 分钟。( 香港考评局，1 9 9 4 ：6 ) 。 自1 9 9 6 年开始，香港考评局为了增加口试的交际性与真实性，对中学会考考试 的口试内容作了较大的调整。首先，第一部分改成了角色扮演，第二部分改成小 组讨论，即根据所给的问题及提示进行小组讨论( g r o u pd i s c u s s i o n ) ( 香港考评 局，1 9 9 6 a ：9 7 1 0 2 ) 。目前，口试内容第一部分改成了小组讨论( 准备时间5 分 钟，讨论时间6 分钟) ，第二部分考官依据小组讨论的内容，向每个考生提出一 个问题，每个考生有1 分钟回答时间( 香港考评局，2 0 0 9 ：4 ) 。 香港高级程度会考也分为两部分：第一部分提供给考生一篇文章，每个考生 阅读后都做一次口头报告( i n d i v i d u a lp r e s e n t a t i o n ) ，第二部分为围绕这个话题四 个考生进行小组讨论( g r o u pd i s c u s s i o n ) 。每组考生的考试时间约2 0 分钟，其中 第一部分每考生l 。5 2 分钟，第二部分讨论1 0 分钟( 香港考评局，1 9 9 6 b ：5 7 ， 2 0 0 9 ：3 ) 。 2 1 1 2 雅思( ie l t s ) 口语考试 雅思考试( 国际英语测试系统，i n t e r n a t i o n a le n g l i s hl a n g u a g et e s t i n gs y s t e m ， 简称i e l t s ) 是一种国际性的英语水平测试，主管机构为英国文化协会( b r i t i s h c o u n c i l ) ，剑桥大学考试委员会( u n i v e r s i t yo fc a m b r i d g el o c a le x a m i n a t i o n s s y n d i c a t e ) ，澳大利亚教育国际开发署( i d p ) 。根据测试目的不同分为学术类测 试( a 类，为测试想到英语国家学习的考生的英语水平) 和培训类测试( g 类， 为测试想到英语国家工作或者移民的考生英语水平) 。 雅思考试包括听力、阅读、写作和口语四个部分。其中口语部分考试采用一 个考官对一个考生进行单独面试的方式进行。考试前会在公告板上列出口试时间 和考生由哪位考官负责。 雅思口语考试分为三部分。每部分为4 - 5 分钟，三个部分总共1 0 - 1 5 分钟。 第一部分是一般问答，主要是帮助考生放松并开始试着英文。问题一般会涉及人 名、家乡、教育、职业背景等方面，采用一问一答的形式，问题量也通常在1 1 5 题左右，每题回答2 4 句话。第二部分是主题卡片陈述。此时考官会递给考生一 张主题卡片，卡片上附有问题和相关观点，要求考生就题目所涉及内容进行回答 并适当展开论述。考生拿到卡片后，有一分钟时间准备，同时可以在提供的草纸 上作笔记，然后就所给的话题做出l 2 分钟的陈述。第三部分是深入讨论，考官 会就第二部分所讨论的主题再提出一些较抽象、总结、概括性的问题，以综合考 察考生的分析、对比、解释和阐述的能力。由于此部分考生要处理一些较抽象或 概括的问题，并且要综合运用多种英文能力，每个问题的长度一般为1 分钟左右。 第2 章现行口语机考系统的问题及分析 2 1 1 3 大学英语四六级口试 全国大学英语四、六级考试口语考试( c o l l e g ee n g l i s ht e s ts p o k e n e n g l i s h ， c e t - s e t ) 是由教育部高教司主持、由“全国大学英语四、六级考试委员会”实 施的标准化考试，目的是测量考生运用英语进行口头交际的能力。 考试采用面对面的形式进行，每场考试由2 名考官面试3 名考生。考试由三 部分组成。第一部分是“热身”，考生先做自我介绍，然后回答主考问题，通过 这种形式使考生进入良好的状态。第二部分是考试的重点部分，采用考生发言和 小组讨论的相结合的形式。考生拿到图片或其他形式的提示后，做1 分钟的准备， 然后做1 5 分钟的发言，而后然后考生就指定的话题进行4 5 分钟左右的讨论。 第三部分由主考进一步提问，以使考生有进一步表现自己口头交际能力的机会， 时间约5 分钟。每场考试总时间共2 0 分钟( 全国大学英语四、六级考试委员会) 。 由于这种面对面考试实施起来较耗人力物力，四、六级考试口语考试明确地 设定了参试门槛，即四级考试笔试成绩在8 0 分以上，六级考试笔试成绩在7 5 分 以上。这也使得一些在笔试中没有达到成绩要求的考生失去了参加口语考试的机 会，打击了这些学生学习口语的积极性。尽管四、六级考试委员会表示会积极研 究开发计算机口语测试，以迸一步扩大口语考试规模，但目前还没有具体的时间 表( 蔡基刚，2 0 0 6 ) 。 四、六级考试委员会在2 0 0 8 年举行的大学英语四六级试点机考中尝试增设 了跟读题型。考试中共十道跟读题，每个题考生先听一遍计算机播放一句英语录 音音频，然后按下录音键，把听到的句子跟读一遍。 2 1 2 口语机考现状 口语机考是一种间接口语测试，通常采用人机交互的方法，将考生对考题的 回答使用计算机多媒体设备进行录制，在评分阶段回放给阅卷教师进行评阅。借 助于计算机设备的使用，口语机考实现了考试过程和评分过程的分离，能降低口 语测试的成本，为扩大口语考试的规模提供了条件。 目前基于计算机的口语考试主要有托福网络考试( t o f e li b n 、v e r s a n tf o r e n g l i s h 考试、外教社大学英语口语考试系统( s f l e pc o l l e g ee n g l i s ho r a lt e s t s y s t e m ) 等，下面分别对这三种考试进行介绍。 2 1 2 1 托福网络考试( t o f e li b t ) 托福考试( t e s to f e n g l i s ha saf o r e i g nl a n g u a g e ，t o f e l ) 是由美国教育考试 服务中心( e t s ) 研发，为希望到海外留学的母语非英语者设计的英语测试，考 试重点测试在学术环境中的英语应用能力。 托福网考( t o e f li b t ) 是e t s 于2 0 0 5 年9 月推出使用计算机网络进行的 6 第2 章现行口语机考系统的问题及分析 新一代托福考试，其中口试部分共有6 题，包括2 道独立口语题和4 道综合技能 题，持续约2 0 分钟。第l 题和第2 题为独立回答题，试题内容是考生所熟悉的 话题。问题会被朗读出来，同时会出现在屏幕上，考生在1 5 秒钟准备后，进行 4 5 秒钟的口头表述，阐述自己观点。第一道题要求考生根据题目表达自己的观 点并解释原因，第二道题要求考生在两个相反的事物中选择一个并解释原因。第 3 题和第4 题以阅读和听力材料为基础，要求考生回答相关问题，题材情景为情 景对话和学术。阅读材料7 5 1 0 0 个单词，听力材料的时间是一分钟左右。答题 时，考生有3 0 秒的准备时间，6 0 秒的回答问题时间。第5 题和第6 题以听力材 料为基础，要求考生从对话中总结出关键思想来回答相关问题。听力材料一道题 是关于学习生活的情景题，一道是学术题。答题时，考生有2 0 秒的准备时间， 6 0 秒的时间回答问题。在整个考试中，考生均可以作笔记帮助自己完成回答。 2 1 2 2v e r s a n tf o re n g lis h 考试 v e r s a n tf o re n g l i s h 测试系统( 原名：p h o n e p a s ss e t 英语口语测试系统) 由 美国o r d i n a t e 公司开发，是一种商业使用的全自动英语口语测试体系，在职业考 试中有较多的使用。该测试最初通过电话进行，目前也可以通过网络在计算机上 进行。系统从流利度( f l u e n c y ) 、句子熟练度( s e n t e n c em a s t e r y ) 、词汇量 ( v o c a b u l a r y ) 、语音语调( p r o n u n c i a t i o n ) 等四个方面评判出考生口语的水平并 综合给出总分。 考试时间为1 5 分钟，共6 2 道试题，分为6 个部分。第一部分是朗读( r e a d i n g ) ， 在考生得到的卷子上会有1 2 个句子，考试时考生按照要求的顺序朗读其中的一 部分。电话考试时，试题在考生提前得到的试卷上，机考时，试卷显示在计算机 屏幕上。考生一般会被要求读6 到7 个句子。句子在结构与词汇上相对简单。第 二部分是重复句子( r e p e a t s ) ，这个部分就是考生根据系统所念的句子，重复所 听到的句子。句子长度和难度逐步增加，长度在3 1 5 单词之间。第三部分是简 答( s h o aq u e s t i o n s ) ，考生会听到一个简单的问题，如“八月过了是几月”等， 用一个或几个单词即可回答。第四部分是造句( s e n t e n c eb u i l d s ) ，考生会听到随 机打乱的三个词组，把所给的三个词组组成一个句子朗读出来。第五部分是故事 复述( s t o r yr e t e l l i n g ) ，考生需要将听到的小故事复述出来，共2 题。第六部分 是开放性问答( o p e nq u e s t i o n s ) ，考生每听到一个问题，都要针对该问题给出自 己的观点，并进行阐述。此部分共两个问题，每个问题有4 0 秒的回答时间( p e a r s o n e d u c a t i o ni n c ，2 0 1 0 ) 。 2 1 2 3 外教社大学英语口语考试系统 外教社大学英语1 2 1 语考试系统( s f l e pc o l l e g ee n g l i s ho r a lt e s ts y s t e m ) 是 7 第2 章现行口语机考系统的问题及分析 作者所在的实验室与上海外语教育出版社合作研发、面向高等院校、在校园网环 境的实施的基于计算机的口语评测系统。已在多所高等院校得到应用，其中中国 科学技术大学从2 0 0 5 年开始使用此系统对大一、大二学生进行期末口语评测。 系统包含由多种类型的试题组成的口语试题库，所含试题均由高校优秀英语 教师和测试专家开发，同时使用者也可以使用出题功能自定义试题。考试实施者 可从口语试题库中抽取一定数量的试题组成一份口语机考所用的试卷。 目前，系统所支持的试题类型共9 种，试题内容广泛涉及日常生活、科学与 技术、旅行与交通、语音文学和艺术、社会、情感、工作、教育、娱乐等方面。 下面对这9 种类型的试题分别进行描述。 1 ) 朗读( r e a d i n g ) 计算机屏幕上将呈现一篇1 4 0 单词左右文章，考生有一分钟的时间预读，然 后用一分钟的时间朗读所看到的文章。 1 ) 复述( r e t e l l i n g ) 考生听到一段1 2 分钟的音频，在1 分钟的准备后，复述文章大意。 3 ) 描述( d e s c r i p t i o n ) 考生对一个试题中指定的事物经过2 分钟的准备后进行描述。例如试题可要 求对考生做自我介绍( i n t r o d u c ey o u r s e l fb r i e f l y ) 。 4 ) 问答( o & a ) 一个问答题一般有几个小题，每个小题依次在屏幕上显示，同时被朗读出来， 考生按顺序对每个小题做出回答。每小题思考时间2 0 秒，回答时间1 分钟。 5 ) 听力问答( l i s t e n & q ) 考生首先听到一段对话或短文，然后回答有关此对话或短文的几个问题。每 个对话有2 0 3 0 秒时间思考，4 0 , - - 6 0 秒时间回答。 6 ) 评述( c o m m e n t ) 考生就所给的题目做成即席讲话，说出自己的观点。 7 ) 图片描述( p i c t u r ed e s c r i p t i o n ) 考生就看到的图片和提示对图片进行描述。 8 ) 视频描述( m o v i ed e s c r i p t i o n ) 考生就看到的视频和提示对视频内容进行描述。 9 ) 小组讨论( g r o u pd i s c u s s ) 考试中考生将被随机分为若干组，每组3 人( 出题时指定，也可设置为2 人 或3 人以上) 。考生就计算机屏幕上指定的话题进行无教师引导的讨论。这里采 用的是申请排队的发言策略：考生在发言前要先进行申请，并排入申请发言队列， 考生按队列顺序依次发言( 苗健，2 0 0 8 ) 。 第2 章现行口语机考系统的问题及分析 2 1 3 比较分析 口语机考起步较晚，在开始设计时传统的面对面口语考试已经有比较成熟的 方案，也借鉴了传统的面对面考试的试题和交互方式。但是，由于计算机毕竟和 面对面的形式不同，因此，两者在试题、交互方式上也有所区别。下面分别从两 者所采用的试题和交互方式上进行比较，找出口语机考在试题和交互方式上的不 足之处。 2 1 3 1 试题比较分析 下面分别从所用试题素材类别和试题类型两方面比较传统考试与口语机考 在试题上的相同的和不同点。 1 ) 试题素材类别比较 在考试所用的素材上，传统考试只能通过纸张向考生展示文字、图片等素材， 如下表所示： 表2 1 传统口语考试试题所含素材类别 香港会考 雅思口语 大学英语 试题素材试题素材描述 四、六级 口试 考试 口试 文字向考生展示的文字材料 、， 、， 图片向考生展示的图片材料 、， 表示含有，表示不含，下同 而在口语机考中，可通过计算机多媒体设备向考生展示和播放文字、图片、 音频、视频等素材： 表2 2 口语机考试题所含素材类别 托福网络考 v e r s a n tf o r 外教社大学 试题类型 试题类型描述英语口语考 试 e n g l i s h 考试 试系统 文字向考生展示的文字材料、， 图片向考生展示的图片材料 、， 音频 向考生播放的音频材料 、， 视频向考生播放的视频材料 、， 9 第2 章现行口语机考系统的问题及分析 因此，在可用素材上，计算机考试占有优势： 表2 3 传统口语考试与口语机考所含试题素材类别比较 试题类型 试题类型描述 传统口语考试口语机考 文字向考生展示的文字材料 、，、， 图片向考生展示的图片材料 、，、， 音频 向考生播放的音频材料 、， 视频 向考生播放的视频材料 、， 2 ) 试题类型比较 表2 。4 传统口语考试试题类型 香港会考雅思口语 大学英语 试题类型试题类型描述四、六级 口试考试 口试 朗读 朗读文字材料 问答回答考官提问 、，、， 评论对指定话题发表看法 、， 、， 小组讨论对指定话题进行讨论 表2 5 口语机考试题类型 外教社大学 托福网络考v e r s a n tf o r 试题类型试题类型描述英语口语考 试 e n g l i s h 考试 试系统 朗读朗读文字材料 复述复述所听到的对话或讲演 、， 问答回答计算机展示的问题 、， 评论对指定话题发表看法 小组讨论 对指定话题进行讨论 、， 通过对传统考试、口语机考的分析，作者将试题分为朗读、复述、问答、评 论、小组讨论五大类。朗读单词、朗读句子、朗读短文等属于朗读类；复述听到 的单词、句子或对话等属于复述类；直接问答、看完材料问答、听完录音问答、 讨论完毕问答等属于问答类；对文字材料、音频材料、图片材料、视频材料的内 1 0 第2 章现行口语机考系统的问题及分析 容或引出的话题等发表看法属于评论类；两人或多人一组，对材料引出的某一话 题进行讨论交流属于小组讨论类。 首先，前述分析的三个传统口语考试所用的试题类型如表2 4 所示： 其次，三个口语机考所用的试题类型如表2 5 所示。 将传统口语考试与口语机考试题类型汇总整理如表2 6 所示。 从表中可看出，相对于传统口语考试，口语机考增加了复述题型。传统口语 考试不易实现复述类试题，这是因为复述类试题需要考生听一段对话或讲演。这 虽然可以借助设备来播放或者由考官来朗读，但前者不易实施，后者对考官要求 较高，且增加了考官的工作量。 表2 6 传统口语考试与口语机考试题类型比较 试题类型试题类型描述 传统口语考试口语机考 朗读朗读文字材料 、，、， 复述复述所听到的对话或讲演 、， 问答回答指定的问题 、， 评论对指定话题发表看法 、， 小组讨论 对指定话题进行讨论 、，、， 通过以上分析，可得出结论：口语机考在试题上存在优势，试题更加灵活， 更加多样化。 2 1 3 2 交互方式比较分析 虽然传统口语考试中的试题口语机考里都能实现，并且增加了新的试题类 型，但两者在交互方式上存在较大差别。 首先，机考系统使用人机对话代替了考生与考官的对话。 传统考试中，考试由考官主导，考官向考生口头提出问题，并要求考生回答。 考试过程中，考官可控制考试节奏，控制考生的回答时间。在口语机考中由于没 有考官参与，显然做不到这一点。 口语机考中，试题不在由考官给出，而是由计算机给出。考生看到显示在屏 幕上的试题的同时，将听到计算机播放预先录制好的由专业人员朗读的试题音 频，经过指定时间的思考后在指定时间内对着话筒说出答案。 虽然口语机考不用考官参与，节约了人力。但不能很好的模拟真实的语境， 毕竟真实的口语对话的都发生在人与人之间，双方可以互相看到，不但有声音， 还有动作、表情等信息被传递。这些在口语机考中都得不到体现。 第2 章现行1 3 语机考系统的问题及分析 其次，考生间讨论的方式有较大差别。 传统口语考试是面对面的方式，考生与考生间进行小组讨论的时候可面对面 交流，讨论中说话人的切换也不存在障碍。但在现有口语机考中，由于技