《心理测量学》课件第八章 教育成就测验的编制与实施

1、第八章 教育成就测验的编制与实施第八章 教育成就测验的编制与实施教育成就测验概述1标准化教育成就测验的编制与实施 2教师自编测验3 教育测验题库建设方法4心理测量学第八章 教育成就测验的编制与实施教育成就测验概述第一节一、教育成就测验的性质二、教育成就测验的分类三、教育成就测验的作用心理测量学第一节 教育成就测验概述教育成就测验是在个体经过一个阶段的学习或训练之后，对其知识、学识和技能的发展水平所进行的测定，是一种专门为教育情境而设计的测验。心理测量学第一节 教育成就测验概述教育成就测验性质最佳行为测验所测的内容是认知性心理品质，包括知识和能力两方面心理测量学第一节 教育成就测验概述二、教育成

2、就测验的分类1.按测验编制方法分：标准化教育成就测验和教师自编测验2.按测验内容分：单科测验和成套成就测验3.按测验用途分：考察性测验和诊断性测验4.按测验评分的参照系分：常模参照测验和标准参照测验5.按测验的题型分：客观型试题和论文式试题心理测量学第一节 教育成就测验概述三、教育成就测验的作用1.反馈2.评价3.选拔和安置心理测量学第八章 教育成就测验的编制与实施标准化教育成就测验的编制与实施 第二节心理测量学第二节 标准化教育成就测验的编制与实施一、标准化成就测验的历史回顾二、标准化教育成就测验的编制三、标准化教育成就测验实施中应注意的问题四、常见标准化成就测验简介心理测量学第二节 标准化

3、教育成就测验的编制与实施一、标准化成就测验的历史回顾始创者：约瑟夫梅尔赖斯（Joseph M. Rice）；教育测验运动的鼻祖：爱德华李桑代克（Edward L. Thorndike）；1845年，波士顿教育家贺瑞斯梅因（Horace Mann）提出在一定条件下施测和计分的书面考试；1864年，英国人乔治费舍尔（George Fisher）编制了第一套可靠计分的客观性成就测验；19世纪末20世纪初，美国的教育改革运动心理测量学第二节 标准化教育成就测验的编制与实施二、标准化教育成就测验的编制（一）测验编制的方法（二）成就测验编制的两种取向（三）测验的标准化要求（四）标准化成就测验编制的步骤心理

4、测量学第二节 标准化教育成就测验的编制与实施（一）测验编制的方法1.理论法2.经验法3.理论与经验结合的方法（二）成就测验编制的两种取向1.课程取向2.广泛取向心理测量学第二节 标准化教育成就测验的编制与实施（三）测验的标准化要求1.测验编制过程标准化2.测验实施标准化3.测验评分标准化4.测验分数解释标准化心理测量学第二节 标准化教育成就测验的编制与实施（四）标准化成就测验编制的步骤 -以斯坦福成就测验为例1.确定测验的目的2.准备和编写项目3.在全国范围内施测4.最终测验的确定5.最终测验的标准化6.确定测验代表的水平心理测量学第二节 标准化教育成就测验的编制与实施三、标准化教育成就测验实

5、施中应注意的问题（一）测验选择的一般原则（二）在多种信息背景下对学业成就的评估（三）标准化成就测验的性别差异心理测量学第二节 标准化教育成就测验的编制与实施（一）测验选择的一般原则1.目的性和实用性2.信度、效度和常模3.沃比岗效应对测验选择的启示心理测量学第二节 标准化教育成就测验的编制与实施沃比岗效应（Lake Wobegon effect）指的是某些地区使用标准化成就测验时，会得到测验分数高于常模水平的现象，而这种现象有可能并不说明该地区学生的成就水平是真正高于常模，而仅仅是一种虚假现象。心理测量学第二节 标准化教育成就测验的编制与实施沃比岗效应的存在提醒我们，在选择标准化测验时必须考虑

6、到测验内容的时间、社会制度和地域的制约性问题，如课程和教材的内容有了相应变化，就不应该再使用陈旧测验。还要考虑到被试的经验，不要重复使用同一个测验。另外，还应该注意适时更新测验常模。心理测量学第二节 标准化教育成就测验的编制与实施（二）在多种信息背景下对学业成就的评估 心理与教育测量的目标是用数量化的方式对测量对象的心理进行客观描述，它仅仅是一种有用的研究手段和测量工具，而不是唯一的办法。要全面评估一个学生的成绩，还要有其它的信息源，如母语、民族、过去的成绩、会谈、智力测验、教师报告、父母报告等。一些测量学者断言“心理测验必然会向着一个新的阶段心理评价发展”（陈中永，1992）。心理测量学第二

7、节 标准化教育成就测验的编制与实施（三）标准化成就测验的性别差异 目前的多数标准化成就测验在某些分测验上都会存在性别差异，问题在于，测验的使用或编制者要明白，这些测验在多大程度上显示了正常的性别角色的差异，在多大程度上沿袭了不公正或者具有歧视性的差异。 心理测量学第二节 标准化教育成就测验的编制与实施四、常见标准化成就测验简介（一）斯坦福成就测验系列（二）4-6年级多重成就测验（三）Woodcock掌握阅读测验心理测量学第二节 标准化教育成就测验的编制与实施（一）斯坦福成就测验系列斯坦福成就测验系列（Stanford Achievement Series）是最早的综合成就测验 。初版发布于19

8、23年，适合于幼儿园至13年级的学生，主要测量学生的阅读、语言、数学等领域的基本技能。该测验系列包括斯坦福早期学校成就测验（SESAT）、斯坦福学业成就测验（SAT）和斯坦福学业技能测验（TASK）。 心理测量学第二节 标准化教育成就测验的编制与实施SAT有六个水平，分为初级1 型(1.52.9年级)、初级2型(2.53.9年级)、初级3型(3.54.9年级)、中级1型(4.55.9年级)、中级2型 (5.57.9年级)和高级型(7.09.9年级)。TASK有两个水平，分别为(8.012.9)年级(TASK1)和9.013年级 (TASK2)。心理测量学第二节 标准化教育成就测验的编制与实施2

9、003 年，斯坦福成就测验进行了比较大的改革，推出了该测验的第10 版（Stanford 10）一种没有时间限制的考试。斯坦福成就测验分为阅读、Lexile 阅读能力测量、数学、语言、拼写、听力、科学、社会科学8 个部分。斯坦福成就测验对学生成绩的报告包括5种形式的导出分数：百分等级、标准九分数、年级当量和正态曲线当量。心理测量学第二节 标准化教育成就测验的编制与实施（二）4-6年级多重成就测验范晓玲，龚耀先2003年编制了4-6年级多重成就测验（The Multiple Achievement Tests of The 4- 6 Grades，MATs）。目的是为了评价小学生学习的相对水平，

10、监控其学历水平及教育咨询服务。心理测量学第二节 标准化教育成就测验的编制与实施MATs有两个分量表：语文分量表（YU）包括注音注字（Y1）、词汇（Y2）、阅读（Y3）、语法（Y4）、文学常识（Y5）五个分测验；数学分量表（SHU）包括数概念（S1）、数运算（S2）、数应用（S3）、几何（S4）、数推理（S5）五个分测验。 心理测量学第二节 标准化教育成就测验的编制与实施（三）Woodcock掌握阅读测验Woodcock阅读掌握测验(Woodcock Reading Mastey Tests，WRMT) 是由美国心理学家理查德伍德科克(Richard Woodcock)编制的一个成套阅读诊断测验

11、，主要用于测查儿童阅读能力的发展水平和存在的阅读问题，也可用于高中毕业生或成人的阅读诊断，属于个别测验。 心理测量学第二节 标准化教育成就测验的编制与实施1987年修订版的常模年龄范围是从幼儿园到十二年级，有G型和H型两个副本，共有6个分测验 ：视听学习测验；字母识别测验；字词识别测验；词语辨析测验；字词理解测验；语段理解测验。测验的原始分数可转换成年龄当量、年级当量、百分位数和标准分数、聚类分数及教学水平剖面图、百分等级剖面图和诊断剖面图。心理测量学第二节 标准化教育成就测验的编制与实施1998年修订版（Woodcock Reading Mastery Test-Revised/Normat

12、ive Update, WRMT-R/NU）对常模进行了更新，其适用对象扩展到从0岁到75岁，常模分数包括百分等级、标准分数、T分数、年龄当量、年级当量、相关表现索引（RPI）等。 心理测量学心理测量学第八章 教育成就测验的编制与实施教师自编测验第三节心理测量学第三节 教师自编课堂测验一、教师自编课堂测验的特点二、教师自编课堂测验的步骤与方法三、教师自编课堂测验应注意的问题心理测量学第三节 教师自编课堂测验一、教师自编课堂测验的特点1.测验形式灵活多变，与测验目的完全一致2.测验内容与教材内容高度一致3.测验难度切合学生的实际水平4.测验编制简易快速心理测量学第三节 教师自编课堂测验二、教师自

13、编课堂测验的步骤与方法1.审查测验目的和测验要达到的目标2.制定测验编制计划3.命题与组卷心理测量学第三节 教师自编课堂测验1.审查测验目的和测验要达到的目标教师自编测验首先要审查测验的目的，如要明确测验对象是谁以及其学习水平和特点；还要明确测验内容、教学要求和目标是什么；此外尤其重要的是要明确测验的性质是什么，是为了安置、诊断、反馈，或者是了解学生对新课程内容的准备情况 。心理测量学（一）测验目标与教育目标分类测验目标的确定是以教育目标分类理论为基础的。（一）布卢姆等人的教育目标分类法（二）加涅的教育目标分类法（三）梶田叡一的教育目标分类法（四）我国认知目标的分类心理测量学布卢姆的分类法加涅

14、的分类法梶田叡一的教育运动技能认知领域评价综合分析应用理解知识智力技能认知策略（问题解决）高级规则规则概念辨别言语信息智力技能技能领域适应练习模仿观察态度领域形成价值情结组织价值体系形成价值观念反应接受行为后果认知因素情感因素态度体验目标精神运动领域目标情感领域目标认知领域目标提高目标精神运动领域目标情感领域目标认知领域目标基础目标精神运动领域目标情感领域目标认知领域目标心理测量学（四）我国认知目标的分类A、五分法知识理解应用分析与综合创造B、四分法识记理解简单运用综合运用心理测量学第三节 教师自编课堂测验2.制定测验编制计划这一步主要包括制定测验蓝图或双向细目表以及确定达到测验目标的最好项目

15、类型 。首先，根据教学目标和教材内容设计一个包括知识和能力两个维度双向细目表 。其次，根据各种题型的特征和侧重考查被试能力特质的哪一方面合理选择 。心理测量学（一）制定命题双向细目表命题双向细目表是命题的蓝图，它详细说明了测验的内容、测验目标、对试题数量、考试时间、测验分数分配等，都起着重要的作用。常见的命题双向细目表有：1、反映测验内容与测验目标关系的双向细目表；2、反映测验内容与测验目标、题型之间关系的双向细目表；3、反映题型与难度、测验内容之间关系的双向细目表；4、反映题型与难度、测验目标之间关系的双向细目表；心理测量学反映测验内容与测验目标关系的双向细目表测验目标知识 理解 应用 分析

16、与综合 创造合计100测验内容合计心理测量学心理测量学反映测验内容与测验目标、题型之间关系的双向细目表内容选择题简答题证明题应用题分析题合计知识理解知识分析综合应用分析综合创造应用合计心理测量学反映测验内容与测验目标、题型之间关系的双向细目表测验内容（内容块）选择题简答题证明题应用题分析题合计知识理解知识分析综合应用应用分析综合创造平面空间两条直线空间直线和平面空间两个平面23384322131599535423515153535合计218728188910100心理测量学设计命题双向细目表的基本原则要求：命题原则1：明确测验的目的，使试题的内容和形式符合测验的目的和要求，能够测出所要测量的知

17、识和能力。命题原则2：试题内容的取样要有代表性，即要对测量目标有充分的覆盖面，且各个部分内容的比例要适当。心理测量学第三节 教师自编课堂测验3.命题与组卷首要问题是教师应该严格按照测验计划进行，特别是要严格按照测验双向细目表规定的教学目标编制出符合要求的试题。具体包括：编制试题、确定答案、评分标准、测验指导语，确定呈现项目的顺序，确定呈现项目的最好方式。 心理测量学第三节 教师自编课堂测验三、教师自编课堂测验应注意的问题1.教师要深入研究教材，深入调查学生2.要客观评价自己的命题技术，合理使用各种题型3.要注意总结命题经验，提高命题技术4.要尽量控制评分误差，防止简单粗糙5.要做一些测验质量的

18、分析研究心理测量学第八章 教育成就测验的编制与实施第四节 教育测验题库建设方法 心理测量学第四节 教育测验题库建设方法 题库定义：狭义题库指测验性能明确的若干题目的有序集合。广义题库指以狭义题库为中心建起的带有若干附加功能的计算机系统。建库目的：提高考试质量，保证考试的公正和公平。 心理测量学第四节 教育测验题库建设方法 一、题库设计与系统编程(一) 题库系统宏观设计 心理测量学(一) 题库系统宏观设计 1 题库指导理论设计指导理论设计综合考虑： 开发目的 精度要求 技术水平 人财物投入能力经典测量理论指导优点： 熟知， 模型简单 投入小 适用于常规测验 心理测量学(一) 题库系统宏观设计2

19、题库指标体系设计设计题库指标体系同时也就是设计题库中试题的存放规则和试题的调用方式。设计目的：1、标明试题性能2、规定试题存储和调用规则 心理测量学心理测量学(一) 题库系统宏观设计2 题库指标体系设计（续）指标体系设计原则： 科学性原则 完备性原则 简易性原则 独立性原则 可操作性原则 心理测量学(一) 题库系统宏观设计2 题库指标体系设计（续）指标体系设计步骤：1、初拟指标 2、精选指标3、精炼指标： 4、指标细分层（类） 心理测量学(一) 题库系统宏观设计2 题库指标体系设计（续）教育测验题库常用指标： 认知目标层次 难度 内容 内容地位 题型 心理测量学(一) 题库系统宏观设计3 题库

20、题量分布设计设计目的： 明确命题任务、保证题库结构合理设计总原则： 科学合理 心理测量学(一) 题库系统宏观设计3 题库题量分布设计（续）科学合理标准：能组成性能符合要求的各种试卷；能组成尽量多的同规格平行试卷；保证题库有尽量多的试题有较高利用率。 心理测量学(一) 题库系统宏观设计3 题库题量分布设计（续）设计依据：对本课程各种试卷的组成结构有全面了解需设计的指标： 题型 难度 内容 内容地位 认知目标层次 心理测量学一、题库设计与系统编程（续）（二） 题库计算机系统设计 1 系统管理功能设计（1）用户管理 （2）命题人员信息管理 （3）考生信息管理 （4）数据文件管理心理测量学（二） 题库

21、计算机系统设计2 试题管理功能设计（1）试题的录入。（2）试题的修改与删除。（3）试题的查询。（4）试题的使用记录查询与记录撤销。（5）电子命题卡设计。 心理测量学（二） 题库计算机系统设计3 数据分析功能设计试题相应参数试卷质量信息被试水平分析 心理测量学（二） 题库计算机系统设计4 组卷、测试功能设计计算机按蓝图自动组卷机测程序心理测量学第四节 教育测验题库建设方法 二 试题命制 （一）命题组织心理测量学（一）命题组织命题人员要求：明确题库建设的目的意义和方法；明确题库指标的意义和界定方法，编码方法；明确命题任务；明确命题要求和命题卡的使用方法。 心理测量学（一）命题组织分配命题任务要求：

22、总体上统筹考虑，结合个人特长以内容章节为依据任务应该形成文字命题的组织形式：不限 心理测量学二 试题命制 (二) 个人命题1 制定个人命题计划研读资料： 教材和考试大纲 指标体系设计材料 个人领取的命题任务资料 心理测量学(二) 个人命题1 制定个人命题计划（续）命题任务具体化：自上而下进行，整个任务先分配到章节，包括各种比例分配，再落实到各考核知识点上，还要有一定比例综合性试题。 心理测量学(二) 个人命题2 命题技术要求编制试题注意事项（6项）： 内容的科学性、用词用语的准确性、 有公认的正确答案、不超纲、 认知层次和难度等级不错位。心理测量学(二) 个人命题2 命题技术要求编制试题注意事

23、项（续）： 制定答案和评分规则注意事项： 保证答案正确，全面。 评分应尽量分步给分，给分尽量不要有伸缩性。心理测量学(二) 个人命题2 命题技术要求编码注意事项： 要对编码规则非常了解 要非常细心，编码不应有误 心理测量学(二) 个人命题3 复查复查的任务：（1）再次评价每道试题的科学性（2）再一次确认所有指标编码的准确性（3）检查题量分布是否符合任务书要求 心理测量学第四节 教育测验题库建设方法 三、审题、试测、入库（一）审题心理测量学（一）审题审题内容（八点）：1、内容是否科学、健康，是否适应时代发展要求。 2、语言是否规范、确切，设问指向是否明确、不易误解。心理测量学（一）审题审题内容（

24、续）：3、迷惑选项是否有效，选项用词有无暗示。4、答案是否正确。 5、评分规则是否客观细致。心理测量学（一）审题审题内容（续）：6、题型是否规范，是否合符本题库规格要求。7、指标编码是否准确，有无遗漏、错位现象。8、命题卡的填写是否完整、规范，字迹是否清楚。 心理测量学（二）试测与数据分析 123第一步做好试卷的编制第二步要选好测试被试第三步组织命题人员亲自阅卷 组织试测：心理测量学（二）试测与数据分析数据分析：使用题库自备的或现有商业软件进行估计试题的各项统计参数根据试题参数对每道试题质量进行评估 心理测量学（三）入库录入员输入要求：委派专业录入人员保证文字题卡内容的绝对完整和可靠录入后应该认真校对换人校对，避免心理定势 心理测量学（三）入库电子题卡导入要求：由系统管理员承担。导入前应该完成文字的校对工作导入时需特别注意编码、编号不能错位 心理测量学第四节 教育测验题库建设方法 题库建成后还必须对整个题库系统进行各方面的功能检验。题库需要长期的维护和更新 。心理测量学第四节 教育测验题库建设