（外国语言学及应用语言学专业论文）计算机在语言测试中的应用.pdf

摘要 语言测试与语言教学息息相关。现代化科学技术手段在语言测试中发挥着越来 越重要的作用。本文不局限于传统测试理论的束缚，引入了现代测试理论项目 反应理论，从以下四方面讨论了计算机在语言测试中的应用：( 】) 项目收集，( 2 ) 计算机辅助语言测试， ( 3 ) 计算机协调语言测试，以及( 4 ) 网上测试。 本文在借鉴国内外有关教育测试文献的基础上，对未来测试的发展及计算机在 测试中的应用提出了一些大胆的设想和建议，并着重讨论了测试标准化，建题库， 评分，避免泄露考题以及应用法律化手段防止泄题等问题。 最后，本文介绍了一种新的适合大学英语测试的模式。该模式具有灵活高效的 特点。若使用管理得当，该模式不仅能减轻教师的负担，满足学生的需要，也必然 会对英语教学起到促进作用。 关键词：语言测试 计算机有效性 一。_ _ _ _ _ 一 a b s t 队c t l a n g u a g et e s t i n gh a sa l w a y sb e e nam a j o rc o n c e r ni ni a n g u a g et e a c h i n ga n d 1e a r n in g m o d e r ns o i e n c ea n dt e c h n o l o g yh a sg r e a t l ya d v a n c e st h ed e v e o p m e n t o fl a n g u a g et e s t i n g g e t t i n gr i do ft h e1 i m i t a t i o n so ft r a d i t i o n a lc l a s s i c a l t e s t i n gt h e o r ya n da p p l y i n gt h ei r t ( i t e r nr e s p o n s et h e o r y ) ，t h i st h e s i s e x p l o r e sr e c e n td e v e l o p m e n t si nt h eu s eo fc o m p u t e r si nl a n g u a g et e s t i n gi n ： ( a ) i t e m b a n k i n g ，( b )c o m p u t e r a s s i s t e dl a n g u a g et e s t i n g ， ( c ) c o m p u t e r i z e d a d a p t i v e1 a n g u a g et e s t i n g ，a n d ( d ) w e b b a s e dt e s t i n g t h et h e s i st h e ne x a m i n e st h ee d u c a t i o n a lm e a s u r e m e n tl i t e r a t u r ei na n a t t e m p tt of o r e c a s tt h ed i r e c t i o n sf u t u r er e s e a r c ho nc o m p u t e r si nl a n g u a g e t e s ti n gm i g h tt a k ea n ds u g g e s t sa d d r e s s i n gt h ef o ll o w i n gi s s u e s ：( a ) p il o tin g p r a c t i c e si nc o m p u t e ra d a p t i v el a n g u a g et e s t s ( c a l t s ) ，( b ) s t a n d a r d i z i n go r v a r y i n gc a l tl e n g t h s ，( c ) s a m p i i n gc a l ti t e m s ，( d ) c h a n g i n gt h ed i f f i c u l t y o fc a l ti t e m s ，( e ) d e a l i n gw i t hc a l ti t e ms e t s ，( f ) s c o r i n gc a l t s ，( g ) d e a l i n g w i t hc a l ti t e mo m i s s i o n s ，( h ) m a k i n gd e c i s i o n sa b o u tc a l tc u t p o i n t s ，( i ) a v o i d i n gc a l ti t e me x p o s u r e ，( j ) p r o v i d i n gc a l ti t e mr e v i e wo p p o r t u n i t i e s ， a n d ( k ) c o m p l y i n gw i t hl e g a ld i s c l o s u r e1 a w sw h e nu s i n gc a l t s f i n a ii y ，an e wm o d eo fl a n g u a g et e s t i n gi si n t r o d u c e dw h i c hp r o v e st o b e v a li da n dr e l i a b l e p r o p e r l yh a n d l e d ，i tw i l ln o to n l yb e n e f i tt h es t u d e n t s a n dr e l i e v et h eb u r d e no ft e a c h e r s ，b u ta l s ob r i n ga b o u tg r e a tp o s i t i v e e f f e c t i m eo nl a n g u a g et e a c h i n g k e y w o r d s ：is m z u s g et e s tin gc o m p u t e r e f f e c tiv e n e e e 0 0 0 7 8 5 独创性( 或创新性) 声明 本人声明所呈交的论文是我个人在导师指导下进行的研究t 作及取得的研究成 果。尽我所知，除r 文中特别加以标注和致谢中所罗列的内容以外，论文中不包 含其他人已经发表或撰写过的研究成果：也f i 包含为获得西安电子科技大学或其他 教育机构的学位或证书而使用过的材料。与我一同t 作的同志对本研究所做的任何 贡献均己在论文中做了明确的说明并表示了谢意。 本人签名： 立望一 r 期：2 塑! ：l 关于论文使用授权的说明 本人完全了解西安电子科技大学有关保留和使用学位论文的规定， 即： 学校 有权保留送交论文的复印件，允许查阅和借阅论文f学校可以公布论文的全部或 部分内容， 可以允许采用影印、缩印或其他复制手段保存论文。( 保密的论文在 解密后遵守此规定) 本人签名： 导师签名： 日期：一壅里2 、1 日期：羔塑! ! i c h a p t e r1 in t r o d u o tio n a sac o l l e g et e a c h e ra n di nc h a r g eo ft h ec o u r s eo fe s pf o re i g h ty e a r s ， ia s km y s e l fc o n s t a n t l y ：i si tt h er i g h tt i m et oa p p l yc o m p u t e rs c i e n c ea n d e v e nw e bi n t ot h et e s to fc o ll e g es t u d e n t si nt h e i re s pc 1 a s s 9d i f f e r e n tf r o m g e n e r a le n g li s hc o u r s ef o rt h eu n d e r g r a d u a t e s ，e s ps e r v e st oh e l pt h o s ew h o h a v ep a s s e dc e t 一4o re v e nc e t 一6t or e a da n dw r i t et h e i rp r o f e s s i o n a m a t e r i a l s m o r ef l u e n t l y f o r t u n a t e l y ，t h ec o m p u t e ri sc a p a b l eo fp r o v i d i n gm a t e r i a l s o nd if f e r e n tm a j o r sa n dt h u sw i11b eag o o dw a yt ot e s tt h o s ew h o s er e s e a r c h i n t e r e s t sa r ei nd i f f e r e n tf i e l d s c o m p a r e dw i t ht r a d i t i o n a lp a p e r b a s e dt e s t i n g ，c o m p u t e ra i d e dt e s t i n gh a s t h ef o l l o w i n ga d v a n t a g e s ： i tc a ns a t i s f yt h er e q u i r e m e n t so fl a r g e s c a l et e s t i n gw i t h o u tt h e n e e do fs om a n yt e s t e r sa n dt e a c h e r so ns p o ta sisn e c e s s a r yin p a p e r b a s e dt e s t i n g t h er e s u l to ft h et e s ti se a s i e rt oo b t a i na n da n a l y z e p r o p e r l yh a n d l e d ，i ti sm o r et e l i a b l e ，v a l i da sw e l ia se f f i c i e n t t h a nt h et r a d i t i o n a lo n e s l o t so fp a p e ri ss a v e d w h i c hi s i na c c o r d a n c ew i t ht h ei d e ao f e n v i r o n m e n tp r o t e c t i o n b e s i d e s ，r e c e n ts t u d i e ss h o wt h a tt r a d i t i o n a ls k i l l s f o c u s e dt e s t so f e n g l i s ha c a d e m i cp r o g r a m s ( g a p ) a b i l i t yr e l a t eo n l yw e a k l yt o l e a r n e r s a b i li t yt oa c to ns u c hs k i l l si na u t h e n t i ct a s kc o n d i t i o n s i nt h i sr e s p e c t ， c o m p u t e ra i d e dt e s t s a r em o r ea p p r o p r i a t et o s t i m u l a t i n gp e r f o r m a n c e s s t u d e n t sw i l l h a v et oe n g a g ei no u t s i d et h et e s ts i t u a t i o n s b e f o r ed i s c u s s i n gt h ef e a s i b i l i t ya n dp r a c t i c a i i t yo fc o m p u t e ra i d e d t e s t i n g ，w en e e dt ol o o kb a c ka tt h ed e v e l o p m e n to fi a n g u a g el e a r n i n ga n d t e s t i n g 2 p 脚i c a 士i q n 缸q m 脚豇i i n 上a n 昏皿掣b 蜘血b 一 0 v e rt h el a s tt e nt of if t e e ny e a r s ，g r e a tc h a n g e sa n dd e v e l o p m e n t sh a v e t a k e np l a c ei nl a n g u a g et e a c h i n g ，l e a r n i n ga n dt e s t i n gw i t hr e g a r dt ob o t h c o n t e n ta n dm e t h o d o l o g y b u tt h em o s ts t r i k i n gc h a n g es h o u l db et h ee m e r g e n c e o ft h ec o m p u t e ra san e wc a r r i e rf o rl a n g u a g el e a r n i n ga n dt e s t i n g m o d e r nl a n g u a g et e s t i n g ，w h i c ha p p e a r e di nt h e1 9 6 0 s ，i san e wd e v e l o p i n g f i e l da s s o c i a t e dw i t h1 i n g u is t i c s ，l a n g u a g em e t h o d o l o g y ，p s y c h o l i n g u i s t i c s ， s t a t is t i c sa n da l s oc o m p u t e rs c i e n c e l a n g u a g et e s t i n g ，a sw e l l a sl a n g u a g et e a c h i n g ，i si n f l u e n c e db yt h e c u r r e n tv i e w so fl a n g u a g er e l a t i n gt ol a n g u a g et h e o r y a c c o r d i n gt o “t h r e e v i e w so fl a n g u a g e ”p r e v a i l i n gi nt h eh i s t o r yo ff o r e i g nl a n g u a g et e s t i n g ， t h e r ee x i s t e dt h r e et r e n d s ：t h ep r e s c i e n t i f i ct r e n d ，t h ep s y c h o m e t r i c s t r u c t u r a lt r e n da n dt h ep s y c h o l i n g u i s t i c s o c i o l i n g u i s t i ct r e n d b e f o r et h e1 9 5 0 s ，n ol a n g u a g et e s t i n gr e s e a r c he x i s t e da n dt e a c h e r s c o n s t r u c t e dt h e i ro w nc l a s s r o o mt e s t s a sn oa t t e n t i o nw a sp a l dt os u c h f a c t o r sa sr e l i a b i l i t ya n do b j e c t i v i t y ，t e s t sd u r i n gt h i sp e r i o d w e r e d e s c r i b e da s p r e - s c i e n t i f i c a n ds o o nr e p l a c e db yt h e “p s y c h o m e t r i c s t r u c t u r a l ”t r e n d f r o mt h ee a r l y1 9 5 0 st ot h el a t e1 9 6 0 s ，s t r u c t u r a l1 i n g u i s t i c s a n d b e h a v i o r a lp s y c h o l o g yc o m b i n e dt op r o v i d eam o r e “s c i e n t i f i c ”m e t h o dt o l a n g u a g et e a c h i n g t e s t sb e g a nt of o c u so ns p e c i f i c l a n g u a g ee l e m e n t sa n d w e r er e f e r r e dt oa s d i s c r e t e p o i n t ”t e s t s a 1 s o ，t h eo b j e c t i v et e s t t e c h n i q u ew a sd e v e l o p e da n dd a t aw e r ed e m o n s t r a t e dw i t hs t a t i s t i c a ls u p p o r t h o w e v e r ，p e o p l ec a m et or e a l i z et h a tt e s t ss h o u l dn o tb ec o n d u c t e dj u s tf o r t e s t i n gs e p a r a t ee l e m e n t sb u tf o rt e s t i n gl a n g u a g ec o m p e t e n c e h e n c et h e q u e s t i o n ：w h a ti sl a n g u a g ec o m p e t e n c e ? l a t e r ，t h eg r o w i n gd i s s a t i s f a c t i o n w i t hs t r u c t u r a l i s ma n db e h a v i o r i s ml e d1 i n g u i s t i cr e s e a r c h e s t o c o m m u n i c a t i v ec o m p e t e n c ea n dt h ec o n t e x to fl a n g u a g e ，a n dt h et h i r dt r e n d r e s u lt e d “p s y c h 0 1 i n g u i s t i c s o c i o l i n g u i s t i c ”t r e n d a l s oc a l l e d i n t e g r a t i v e s o c i o l i n g u i s t i c ”p e r i o d ，c a nb et r a c e db a c kt ot h el a t e1 9 6 0 s l i n g u i s t s r e a l i z e dt h a tt h ew h 0 1 eo ft h ec o m m u n i c a t i v ee v e n tw a sc o n s i d e r a b l yg r e a t e r t h a nt h es u mo fi t sl i n g u i s t i ce l e m e n t s a sar e s u l t ，l a n g u a g e t e s t l a g s p e c i a l i s t sb e g a nt oe x p l o r ew a y so ft e s t i n gt h ec o m m u n i c a t i v ec o m p e t e n c e e b a 皿e 【l i n 妞坷u c i i q n 3 o fl a n g u a g el e a r n e r s t h a ti st os a y ，t e s t sa r et ot e s t1 a n g u a g eu s a g ea n d n o tk n o w l e d g ea b o u t1 a n g u a g e ，a n dt h es t r u c t u r e st ob et e s t e ds h o u l db ev a l id s t r u c t u r e si nc o l l o q u i a l1 a n g u a g eu s e n o w a d a y s ，t h ec o m p u t e r is p l a y i n ga m o r ea n dm o r ei m p o r t a n tr o l ei n c o m m u n i c a t i o n s oisi t i nl a n g u a g et e s t i n g a 1 1 g o o dt e s t s p o s s e s st h r e e q u a i t i e s ：v a l i d i t y ，r e l i a b i l i t ya n dp r a c t i c a l i t y i nt h ef o l o w i n gc h a p t e r s t h ea u t h o rw i l le x p l a i nh o wac o m p u t e r b a s e dt e s ts a t i s f i e st h er e q u i r e m e n t s o fag o o dt e s t c h 掣r2l 柚目皿踞i s 1 m g 丑【l d 工盥血垃k 上b 1 5 l 皿de u t 眦l 一5 c h a p t e r2l a n g u a g et e s t in ga n dt a c h n oio g y ： p a s ta n df u t u r e t e c h n o l o g yi si n c r e a s i n g l yb e i n gp r o m u l g a t e da sap o w e r f u lm e c h a n i s mt h a t c a nt r a n s f o r me d u c a t i o na n di tisn o tan o v e lt o p i cf o r1 a n g u a g et e s t e r s w i t ht h eg r o w i n gu s eo ft e c h n 0 1 0 9 y ，i ti sa p p r o p r i a t et or e f l e c to nw h a th a s t r a n s p i r e di nt h es e c o n dl a n g u a g et e s t i n gf i e l dr e l a t e dt ol a n g u a g et e s ta n d t e c h n o l o g ya n dt os i t u a t et h ed e v e l o p m e n t sw i t h i nt h e1 a r g e rl a n g u a g et e s t i n g g e n e r a lm e a s u r e m e n ta n de d u c a t io n a lc o n t e x t s t h es e c o n d l a n g u a g e f i e l d sf i r s tc o n c e r t e de f f o r t i nt e r m so f c o m p u t e r b a s e dt e s t i n g ( c b t ) e m e r g e di nt h em i d 一8 0 sw i t ht h e1 9 8 5l a n g u a g e t e s t i n gr e s e a r c hc o l l o q u i u m ( l t r c ) g r e a ta t t e n t i o nw a sp a i dt oc b ta n dt h e a p p l i c a t i o no f1 a t e n tt r a i tm o d e l st oi t e m b a n kc o n s t r u c t i o n ，i t e ms e l e c t i o n ， a n dc o m p u t e ra d a p t i v et e s t i n g ( c a t ) t h eg e n e r a lm e a s u r e m e n tp r o f e s s i o nh a d b e e nw o r k i n gw i t hc b ta n d ，m o r es p e c i f i c a l l y ，w i t hc a ts i n c et h ee a r l y7 0 s t h ef i r s tc o n f e r e n c eo nc a tw a sh e l di n1 9 7 5 p e r h a p st h em a i nr e a s o nt h e s e c o n dl a n g u a g ef i e l dh a sl a g g e db e h i n di nt h i sa r e ai sb e c a u s ei th a sl o n g p r o m o t e dp e r f o r m a n c e b a s e da s s e s s m e n t ，af o r mo fa s s e s s m e n tt h a t d o e sn o t l e n di t s e fa sr e a d i l yt oc o m p u t e r i z e da d m i n i s t r a t i o na sd om o r et r a d i t i o n a l t e s tf o r m a t s s o ，w h e r e a sg e n e r a lm e a s u r e m e n tr e s e a r c h e r s ，e s p e c i a l l yt h o s e w o r k i n gw i t hc a t ，h a v ec o n c e r n e dt h e m s e l v e sm o r ew i t hs e l e c t e d r e s p o n s ei t e m t y p e s ，t h es e c o n dl a n g u a g ef i e l dh a sc o n t i n u e dt op r o m o t ep e r f o r m a n c e b a s e d a s s e s s m e n t ，a n de v e nt o d a y ，c b tp e r f o r m a n c e b a s e da s s e s s m e n tc o n t i n u e st o b eac h a l l e n g e t h em o s tr e c e n tb o o kd e a lj n gw i t hc a ta p p e a r e di n1 9 9 9 t h ec h a l h o u b d e v i l l e ( 1 9 9 9 ) e d i t e dv o l u m ei sd e v o t e de n t i r e l yt oc a ti s s u e s ，w i t he x p e r t s f r o m b o t ht h el 2a n dg e n e r a lm e a s u r e m e n tf i e l d si n v i t e dt os h a r et h e i r r e s e a r c hk n o w l e d g ea n de x p e r i e n c ei nt h r e ei n t e r r e l a t e da r e a s ：t h el 2r e a d i n g c o n s t r u c t ，l 2c a ta p p l i c a t i o n s ，a n di r t ( i n t e r n e t r e l a t e dt e c h n o l o g ie s ) m e a s u r e m e n ti s s u e s t h ev o l u m eh i g h l i g h t st h ei m p o r t a n c eo f ac o n s t r u c t d r i y e na p p r o a c ht oc a tw o r ka n de x p l o r e sl i n k sa m o n gt h ev a r i o u sa r e a st o a d v a n c em o r es y s t e m a t i ca n dc o n s t r u c t b a s e dc b ta n dc a td e v e l o p m e n t o v e r1 5y e a r sh a v ep a s s e ds i n c el t r cf i r s tf o c u s e do nt e c h n o l o g y ，a n do n e c a na r g u et h a tg r e a ts t r i d e sh a v eb e e nm a d ei nt h ea r e ao fc b ta n dc a t t h e c o m p u t e r i z e dd e l i v e r yo ft e s t sh a sb e c o m ea na p p e a l i n ga n dav i a b l em e d i u m f o rt h ea d m i n is t r a t i o no fs t a n d a r d i z e dl 2t e s t si na c a d e m i ca n dn o n a c a d e m i c i n s t i t u t i o n s a d d i t i o n a l l y ，ar e a s o n a b l eb o d yo fr e s e a r c he x i t si nt h i sa r e a w h i l et h eu s eo fa n dr e s e a r c ho nc b ti sg r o w l n g ，a ni m p o r t a n ti s s u et oc o n s i d e r i st h en a t u r eo ft h ec h a n g et h a tt h i sm o d eo fa s s e s s m e n th a si n t r o d u c e dt o l 2t e s t i n g a ne x a m i n a t i o no ft h ec h a n g e sb r o u g h tf o r t hb yl 2c b ts h o w st h a tt e c h n o l o g y h a sb e e ni n t e n d e dp r i m a r i l yt oh e l pm a k ea s s e s s m e n tm o r ee f f i c i e n ta n d s e r v i c e a b l e w h i c hi sw h a tc h r i s t e n s e n ( 1 9 9 7 ) c a l l s ”s u s t a i n i n g ”i n n o v a t i o n s c b ta ll o w s ，a m o n go t h e rt h i n g s ，m o r ef l e x i b l ea n di n d i v i d u a l i z e dt e s t a d m i n i s t r a t i o n ，t r a c k i n go fs t u d e n tp e r f o r m a n c e ，i m m e d i a t et e s tf e e d b a c k ， n e wi t e m t a s kt y p e s ，a n de n h a n c e dt e s ts e c u r i t y p e r h a p so n eo ft h em o s t e x c i t i n gc a p a b i l i t i e so fc b ti st h ea d a p t i v ea p p r o a c h ，w h i c ho n em i g h ta r g u e ， u s i n gc h r i s t e n s e n st e r m i n o l o g y ，i sa ”d i s r u p t i v e ”t e c h n o l o g y ，t h a ti s ，a t e c h n o l o g yt h a tc h a n g e sh o ww e t h i n ko fa n di m p l e m e n to u ro p e r a t i o n s c a t p e r m i t st h et a i l o r i n go fi t e md i f f i c u l t yt ot h et e s tt a k e r sp e r f o r m a n c e ， a l l o w i n gam o r ea c c u r a t ea s s e s s m e n to ft h ee x a m i n e e sl 2a b i l i t y b u ta p a r t f r o mt h ea d a p t i v ei n n o v a t i o n ，c b th a sb e e nu t i l i z e dm a i n l yt of a c i l i t a t et e s t d e li v e r ya n da d m i n i s t r a t i o n w h a ti sn e e d e d ，t h e r e f o r e ，i st oe x p l o r eh o w t e c h n o l o g yc a ne n g e n d e rf u n d a m e n t a lc h a n g e si nt h el 2c b te n d e a v o r i nt e r m so fc o n s t r u c tr e d r e s e n t a t i o n ，iti sw e l ld o c u m e n t e dt h a tt h el 2 c o n s t r u c ti sm u l t i d i m e n s i o n a la n di n v o l v e sav a r i e t yo fi n t e r a c t i n g c o m p o n e n t sa n dp r o c e s s e s ( b a c h m a n ，1 9 9 0 ：b a c h m a n p a l m e r ，1 9 9 6 ) l a n g u a g e t e s t e r sn e e dt ou t i l i z et e c h n o l o g yt od e s i g nm e a s u r e st h a ti n c r e a s i n 9 1 y e x p l o r e a n db e t t e rm e a s u r es u c h c r i t i c a l a s p e c t s o ft h ec o n s t r u c t a d d i t i o n a l l y ，r e s e a r c h e r sh a v ea r g u e dt h a ts o m ea b i l i t i e sa n dp r o c e s s e s ， w h i c ha r ec r i t i c a lf o rb e g i n n i n gl a n g u a g e1 e a r n e r s ，b e c o m el e s ss a i e n tf o r m o r ep r o f i c i e n tl e a r n e r s ，f o rw h o my e to t h e ra s p e c t so ft h ec o n s t r u c tb e g i n t oe m e r g e ( b e r n h a r d t ，1 9 9 1 ) t e c h n o o g yp r o v i d e sa ne x c e l l e n tc a p a b i l i t yt o t r a c et e s tt a k e r s l a n g u a g ed e v e l o p m e n t ，t h u se n a b l i n gr e s e a r c h e r st ob e t t e r u n d e r s t a n dh o wa s p e c t so ft h ec o n s t r u c te v o l v ea c r o s sd if f e r e n ta bi 】it y 】e v e s t e c h n o l o g ym i g h ta l s oh e i pt e s td e v e l o p e r sm o v eb e y o n dc o n v e n ti o n a lt e s t d e s i g np r o c e d u r e s ，w h i c hp r o v i d es c o r e sp r i m a r i l yt or a n ks t u d e n t s ，t oo t h e r p r o c e d u r e st h a tc a nf a c i l i t a t eam o r e w h i c hc r e a t e si n t e r r e l a t i o n sa m o n g s y s t e m a t i ct e s td e s i g na p p r o a c h ，o n e t a s kc h a r a c t e r is tic s ，t e s tt a k e r s p e r f o r m a n c e s ，a n di n f e r e n c e sa b o u ti n t e n d e du n d e r l y i n ga b i i i t i e sa n d p r o c e s s e s s u c ha na p p r o a c hw o u l dp r o d u c ear i c h e ra n dm o r em e a n i n g f u l d e p i c t i o no ft e s tt a k e r s a b i i i t i e s a ne x a m p l eo fs u c ha ni n t e g r a t e da n d c o n s t r u c t b a s e da p p r o a c ht oc b td e s i g ni sp o r t a l