教育测验编制与分析技术在学习诊断评量上的应用

教育测验编制与分析技术在学习诊断评量上的应用

基本教学模式教学目标起点行为教学活动教学评量提供回馈教学评量是一种历程，以确保教学目标之达成为宗旨。教学评量的目的了解起点行为及适当安置学生规划教学活动及调适教学步调诊断学习困难及激励学习动机评定学习成就及报告学业成绩教学评量的基本原则一、依据教学目标

二、兼顾多重目标

三、采用多元方法

四、进行多次评量

五、重视反应历程

六、善用评量结果标准化测验编制流程图教师自编成就测验1.准备测验编制计划

2.编拟测验试题

3.试题与测验的审查

4.试题与测验的分析

5.测验的编辑准备测验编制计划一、确立测验的目的和目标 （一）认知的教学目标 （二）情意的教学目标 （三）动作技能的教学目标二、设计双向细目表三、选定测验的题型

（一）选择型试题（客观测验）

（二）补充型试题（论文测验）双向细目表编拟测验试题1.下列何者为当今(2005年)的美国总统？

(1)李登辉

(2)陈水扁

(3)柯林顿

(4)小布什:题干

:诱答选项

:诱答选项

:诱答选项

:正确选项一、选择题的性质：二、选择题的类型类型Ⅰ：Ｐ→Ｃ说明：此题型表示一个命题产生一个结果；亦即，学生必须根据命题的陈述，从ｋ个选项中挑选出一个正确（或较佳）的答案。目标：主要是测量名词的记忆能力，亦可以用来测量理解和应用等层次的学习目标。类型一例题空城计一文是摘自哪一本书？（挑一个正确的答案）

A.西游记

B.水浒传

*C.三国演义

D.东周列国志二、选择题的类型（续）类型Ⅱ：Ｐ1∩Ｐ2∩

……∩Ｐn→Ｃ说明：此题型表示交集（即∩）数个命题以产生一个结果；亦即，学生必须在多个命题条件的限制下思考，然后从ｋ个选项中挑选出一个正确的答案。这种类型可以增加试题的困难度和复杂性，比较能够测量出较高层次的认知能力。目标：主要是测量应用、分析、及推理层次的认知能力。类型二例题姊妹二人共有100元，今姊姊给妹妹12元后，两人的钱变得一样多，问：原来姊妹二人各有多少钱？

A.姊51元，妹49元

B.姊72元，妹28元

*C.姊62元，妹38元

D.姊38元，妹62元二、选择题的类型（续）类型Ⅲ：Ｐ

Ｃ说明：此题型表示命题是属于（或包含于）结果中；亦即，学生必须能够知道所陈述的命题应该归类到哪一类结果中，然后从ｋ个选项中分辨之。这种类型试题，只要变化一下命题或结果（二者之一皆可），便能产出另一题复本试题来。目标：主要是测量分类层次的认知能力。类型三例题皮亚杰（J.Piaget）被认为是哪一类心理学家？

*A.发展（developmental）

B.工业（industrial）

C.心理计量（psychometric）

D.社会（social）二、选择题的类型（续）类型Ⅳ：(Ｐ1∩Ｐ2)U(Ｐ1∩Ｐ2)U(Ｐ1∩Ｐ2)U(Ｐ1∩Ｐ2)…

→Ｃ说明：此题型表示题干中有ｎ个命题，各有「对或错」之分，然后要求学生分别判断其对错，再从２ｎ个可能结果中，选出正确的一个。如果题干所提供的命题数是两个（即ｎ＝２），则可能产生４个不同的选择，其中有一个是正确的，三个是错误的（即诱答选项）；如果命题数是三个（即ｎ＝３），则可以产生８个不同的选择，其中有一个是正确的，七个是错误的，当这种情况出现时，选择题的四个选项最好是安排「两错一对」或「两对一错」的选择，而不要安排「三错一对」、「三对一错」、「全对」或「全错」的选择供学生挑选，以降低学生因猜题而猜中的机率。目标：主要是测量综合与评鉴层次的认知能力。类型四例题(1).民「惟」邦本──只(2).「惟」闻女叹息──只上述「惟」字的用法，何者正确？A.(1)和(2)都正确B.(1)正确，(2)不正确*C.(1)不正确，(2)正确D.(1)和(2)都不正确二、选择题的类型（续）类型Ⅴ：Ｐ1：Ｐ2::Ｐ3：Ｃ说明：此题型表示第一个命题「对」（versus）(即：)第二个命题的关系，「犹如」（sameas）或「相当于」（similarto）（即::）第三个命题「对」一个结果的关系；亦即，学生必须先行判断前面两项命题间的关系，然后，推论后两项命题间应有的关系为何，再从四个选项中挑选一个正确的选项。目标：主要是测量演绎及归纳相关事项的能力，以及应用、综合、评鉴等认知能力。类型五例题「舅舅奉养外公、外婆」对「家庭的生物功能」，犹如「表哥带弟妹玩耍」对「家庭的

__」？A.心理功能B.教育功能*C.娱乐功能D.社会功能类型五的变例变例：「Ｐ1：Ｃ1::Ｐ2：Ｃ2」妈妈对＿＿的关系，犹如爸爸对＿＿的关系？*A.婶婶，姨丈

B.堂弟，表哥

C.舅舅，姑丈

D.姑姑，嫂嫂三、选择题的命题原则原则：1.试题的设计应该能够测量到重要的学习成果。原则：2.每个试题的选项数目应该保持一致。原则：3.题干的叙述宜清楚表达题 意，避免过短或过长。三、选择题的命题原则（续）原则：4.题干的叙述宜保持完整，避免被选项分割成两个部份或段落。[不良例题]：

（题干的叙述被选项分割，造成题意被干扰）

Mymother

A.talkto

B.speaks

*C.istalkingto

D.isspeakingmyfather.三、选择题的命题原则（续）原则：5.选项的叙述宜力求简短，必要或相同的叙述字词宜放在题干中。[不良例题]：

（选项中相同的字词重覆出现多次，增加阅读时间)「军书十二卷」、「同行十二年」、「策勋十二转」，以上三句中的「十二」是？A.表示真实的数目B.表示吉祥的数目C.表示固定的数目*D.表示很多的数目三、选择题的命题原则（续）原则：6.所有错误选项的叙述，应该具有与题干叙述相关联的似真性或合理性，以发挥应有的诱答功能。[不良例题]：

（错误选项缺乏似真性，错得过于离谱，丧失诱答力）美国的首都是？A.台北B.东京*C.华盛顿D.伦敦三、选择题的命题原则（续）原则：7.尽量在题干中使用肯定句的叙述，避免使用否定句的叙述；如果必须使用否定句叙述时，宜特别强调否定句的字眼或字词。[不良例题]：

（没有特别强调否定句叙述的字眼）请选出没有对仗的句子？

A.调素琴，阅金经

*B.山不在高，有仙则名

C.苔痕上阶绿，草色入帘青

D.南阳诸葛庐，西蜀子云亭三、选择题的命题原则（续）原则：8.试题必须确定只有一个清楚表达的正确答案或相对较佳的答案。[不良例题]：

（题意不明确，相对较佳答案可能不止一个）与高雄县相当的是下列哪一个都市？

A.高雄市

B.台东市

*C.新竹市

D.凤山市三、选择题的命题原则（续）原则：9.选项之文法必须与题干和试题格式一致。[不良例题]：（选项中的文法与题干不符）Ken：Lookatthis!Thereiswormintheapple.Sue：Butthatkindofappleisveryhealthy.Ken：Whatareyoutalkingabout？A.Kendon'tlistentoSue.*B.Kendoesn'tthinkSueisright.C.KenwantSuetosayitagain.D.KenhopedSuetoeattheapple.三、选择题的命题原则（续）原则：10.题干和选项中的叙述应该避免暗示正确答案的线索出现。[不良例题]：

（题干与正确答案中的叙述，均使用相同的字眼）John：Let's_____footballthisafternoon.Joe：Idon'tliketoplayfootball.

*A.play

B.go

C.run

D.kick[不良例题]：

（题干中的文法结构（如：an）提供暗示答案的线索）A：Whatareyoudoing？

B：I'meatingan____.

A.banana

B.kiwi-fruit

C.fried-chicken*D.apple[不良例题]：

（正确答案的叙述和排序，一字不漏地直抄课文）「廉」的意义是指？

A.正正当当的行为

B.清清白白的辨别

*C.规规矩矩的态度

D.切切实实的觉悟[不良例题]：（正确答案的叙述特别详细、过长）下列有关「需求」的叙述，何者有误？A.需求是欲望的具体化B.需求乃指整条需求曲线C.需求是客观的表示*D.需求是其他条件不变时，消费者在一定期间内对特定财货，在特定的价格下，愿意且能够购买的数量[不良例题]：

（诱答选项中使用绝对性的字眼（如：总是、绝不、都是、从来没有、惟一等），暗示该诱答选项是错误的）Achievementtestshelpstudentsimprovetheirlearningby：A.encouragingthemalltostudyhard.*B.informingthemoftheirprogress.C.givingthemallafeelingofsuccess.D.preventinganyofthemfromneglecting

theirtasks.[不良例题]：

（包含两个内容重叠的诱答选项，暗示该诱答选项是错误的）什么类型试题是在测量考生的回忆力？

*A.补充型试题

B.选择型试题

C.配合题

D.选择题[不良例题]：

（包含两个意义相同的诱答选项，暗示该诱答选项是错误的）「絮聒」的意义是指？A.棉花飘落的样子B.柔细飘扬的棉花*C.语烦不断的样子D.喜欢讲话的样子三、选择题的命题原则（续）原则：11.错误选项尽量避免使用「以上皆非」和「以上皆是」。[不良例题]：「五伦」中的哪一伦是发生在家庭里？A.兄弟伦B.夫妇伦C.父子伦*D.以上皆是[不良例题]：下列日常用具中，何者使用电动机做为动力？A.电话机B.烤面包机C.电视机*D.以上皆非三、选择题的命题原则（续）原则：12.以随机方式排列及调整正确答案出现的位置和次数。原则：13.以变化题干或改变选项任何一者，来控制试题之难度。原则：14.保持同一份测验中的每个试题各自独立。三、选择题的命题原则（续）原则：15.使用经济有效的试题格式。原则：16.尽可能不要依照教科书内容的顺序来排列试题。原则：17.试题不宜过多，以免变成速度测验。原则：18.如果还有其他管道可以改进选择题试题编制的有效性，可以不必墨守上述原则性的成规。试题与测验的分析一、试题分析部份

1.难度指标（difficultyindex）的分析。

2.鉴别度指标（discriminationindex）的分析。

3.诱答力（distraction）的分析（使用选择题时）。

4.注意指标（cautionindex）的分析。二、测验分析部份

1.信度指标（reliabilityindex）的分析。

2.效度指标（validityindex）的分析。

3.差异指标（disparityindex）的分析。TesterForWindows2.0版的使用一、输入命令列二、输入试题的标准答案三、输入原始反应资料矩阵三、执行程序四、存档或打印五、结果档解读结果档解读一、试题分析部份

1.难度指标。

2.鉴别度指标。

3.诱答力分析（使用选择题时）。

4.注意指标。二、测验分析部份

1.信度系数。

2.效度系数。

3.差异指标。难度与鉴别度指标的涵义难度：

Ｐi

＝(ＰiH+ＰiL)/2 数值愈大，表示题目愈简单。 数值愈小，表示题目愈困难。鉴别度：

Di

＝(ＰiH-ＰiL)

数值愈大，表示题目质量愈好，鉴别力愈高。 数值愈小，表示题目质量愈差，鉴别力愈低。难度与鉴别度的关系诱答力分析的涵义判断原则：一、至少有一位低分组学生选择任何一个不正确选项。二、选择不正确选项的低分组学生人数应该比高分组学生人数还多。信度与效度的涵义信度：

简单的说，指测量分数的精确性。 数值愈大，表示测量结果愈可信。效度：

简单的说，指测量分数的正确性。 数值愈大，表示测量结果愈正确。差异系数的涵义值域：

(完美量尺)0

差异系数

1(随机测验)常模参照测验：

差异系数0.50为标准显示正常

差异