试卷质量漫谈

试卷质量分析漫谈翟建才第三军医大学训练部考试中心目录一、考试和试卷二、高质量试卷的基本要求三、决定试题质量的主要因素四、试卷质量分析的目的和意义五、试卷质量分析的内容六、工作进度和基本要求一、考试和试卷考试是各类各级教育管理机构了解教学状况、对学生的学习目标达成度给予认定的重要手段，也是一种对教、学的阶段性效果的评估手段。历来是选拔人才和认证资格的公认工具。作为考试载体形式的试卷的质量对于教育和人才的质量控制有着至关重要的作用。教育部2007年启动实施“高等学校本科教学质量与教学改革工程”（简称质量工程）

创造安全、便捷、高效的考试平台。

----2007年高教1号文件

教育部2007年启动实施“高等学校本科教学质量与教学改革工程”（简称质量工程）

“进一步完善高等学校的内部质量监控和评价体系。…完善教师、院系、学校三级质量保障机制，逐步建立保证教学质量不断提高的长效机制。”---2007年高教2号文件

本科教学工作评价指标体系

5.5质量控制5.5.2教学过程质量监控

A级指标：“监控体系完善，能及时对主要教学环节和教学阶段进行检查、调控，效果明显。”

5.5.3试卷质量与考核方式

A级指标：“试题库完善，试卷质量高；考核方式符合课程要求，有利于提高学员的综合素质。”二、高质量试卷的基本要求先决条件：建有一个数量庞大、质量优异的试题库是使得试卷质量高的先决条件。基本要求：客观、科学、公正、有效是对考试也是对试卷的基本要求。

三、决定试题质量的主要因素命题命题必须熟悉和明确考试的内容领域和相应的行为目标。内容结构领域即不同方面知识的比例划分，行为目标即认知程度的设定。命题的核心问题是测量什么（即考试内容范围的确定）、如何测量（讲的是题型的选定）以及数量多少（包括总题量和上述各考察项目的具体数量）。试题的生命在于试题本身能够提供的信息量的大小，它和试题质量紧密相关。因此，命题时必须十分关注试题背景材料的选定。三、决定试题质量的主要因素组卷影响试卷质量除试题本身给出的内容和指标外，还应该包括组成试卷后整体质量的评估指标体系，它们是试卷的考试重点内容覆盖面、试卷的题量和难易度是否和考试时间适配、试卷的规范性、制卷过失率以及与测试目标的符合程度等项目。就我们多年教学督导的结果来看，组卷方面的不足也不可忽视。四、试卷质量分析的目的和意义目的：1主要是通过考试结果的实际数据来做出学生成绩分布曲线，以及对分组成绩的相关性分析来评价本次考试、试题以及组卷的信度、效度、难度和区分度等赋值。2利用试卷的质量评价综合指标来校验组卷时的设计方案的符合程度，并根据这种偏离来确定是否需要对评分予以调整，并确定是否需要对试题的属性指标作必要的修正。3从试卷质量分析入手，做好教学质量的评估、反馈和控制。四、试卷质质量分析的的目的和意意义意义：无论是试题题还是试卷卷的质量指指标，都是是需要通过过考试的结结果作为基基本数据来来确定的。。此外。我我们还可以以从考试结结果的实际际数据来分分析知识点点、学科整整体的教和和学两方面面的成绩与与不足，给给出评价性性意见。横横向比较学学生其它学学科和同学学科其它学学生的学习习情况，以以及纵向比比较近几年年的分析结结果对教学学质量给出出建议性结结果。总之一句话话：试卷质量分分析是提高高教学质量量的长效机机制的重要要组成部分分。五、试卷质质量分析的的内容试卷的质量量分析主要要包括两方方面的内容容：试卷质质量的统计性分析析以及教学质质量的诊断和可能能性分析。目前对前前者的研究究相对地还还比较充分分，而对后后者的研究究和应用则则欠缺得多多。究其原原因主要有有两条：一一是缺少指指标体系，，二是缺少少功能执行行主体。我我们对前者者主要是介介绍统计学学方法在教教育测量学学方面的应应用，对后后者主要是是根据我们们的教学经经验和理论论学习提供供一些建设设性意见，，供大家参参考。五、试卷质质量分析的的内容统计性分析析：信度、效度度、难易度度和区分度度是教育测测量学的质质量评价的的常用统计计学指标，，有着严格格定义而且且规定了相相应的计算算方法和公公式。试卷卷质量分析析的基本依依据也主要要采用这四四个指标。。下面我们们仅只介绍绍它们的内内涵，而省省去了计算算方法和公公式的讨论论。信度和效度度信度和效度是对考试成成绩的期望望值与真值值偏差的概概率评价分分析。效度是对总总误差，特特别是系统统误差的赋赋值和评价价。它的内内涵是通过过此考试所所得结果而而对教学效效果的认定定或相关推推断适当、、有效程度度的概率。。二者均是统统计学结果果（不受系系统和偶然然偏差影响响的程度））的表征，，它们的取取值区间均均为[0，，1]，数值越大越越佳。信度和效度度信度和效度是对考试成成绩的期望望值与真值值偏差的概概率评价分分析。设考试成绩绩为X，真真实值是T，那么考考试结果存存在着随机机误差Ep和系统误误差Es，，四者的关关系是X=T+Ep+Es。而信度是是对随机误误差大小评评价的赋值值，它是对对此考试和和除它之外外的同一目目标的其他他考试（无无论是否已已实施）一一致程度的的评价。实实践表明，，信度评价价的重点是是对影响因因素的分析析，而不是是获得信度度。难易度和区区分度试题的难易度可以用答对对该试题考考生占总数数的纯小数数值来表示示。中等难度的的数值在（（0.3-0.8））,把易答答题控制在在20%，，难答题在在10%以以内较妥。。区分度是对学习目目标达成度度区分能力力的鉴定指指标。方法法是把考试试成绩分成成优、中、、差三组（（客观题按按对错只分分成优差二二组），把把优、差的的得分值（（比例）的的差与平均均得分（答答对率）的的比值作为为区分度；；区分度的赋赋值以适中中为好。试卷的质量量评价综合合指标所有题目的的某指标的的加权平均均值即为试试卷的该项项指标；试试卷四项指指标的加权权平均值即即为试卷的质量量评价综合合指标。虽然对试试卷质量评评价的统计计学指标可可以只用一一个，但是是它又是所所有试题的的四个指标标的加权平平均值。五、试卷质质量分析的的内容诊断和可能能性分析：：试卷的考试试重点内容容覆盖面、、试卷的题题量和难易易度是否和和考试时间间适配、试试卷的规范范性、制卷卷过失率以以及与测试试目标的符符合程度、、锚题的设置是否否有效等。。注：为了“校准准”试卷测测试系统的的一致性，，并为未来来的分数调调整、教学学质量的纵纵向和横向向比较提供供尽可能相相同的标准准，在试卷卷中要安排排一定数目目的“锚题”。锚题或称称共同参照照试题，顾顾名思义就就是在同一一测试目标标下在不同同批次的试试卷中共同同的试题（（可能在形形式上略有有变动）。。适用对象适用专业层次明确适当命题依据依据学校颁发的人才培养方案和教学计划、针对学科特点、课程标准、使用主教材及课程教学实施计划合理进行命题思想对本课程的考核要全面、有效、符合因材施教的实际，能反映课程学习达标的基本要求。试卷命题既要反映教与学的重点，又要照顾全面；既要能检查学员对基本概念和基本知识的理解应用能力，又要考核其运用已学知识综合分析问题的能力。题型题量题型要多样化，有利于承载试题信息、设置疑问，测量学员对各考点的理解深度、掌握广度和应用活度。总题量和各种题型所占比例适当，要使中等程度的学员在规定考试时间内能完成全部的答题并留有一定的检查时间。内容分布试卷内容分布要体现总体的教学目标，对教学重点要有所侧重，对教学难点要有所涉及，对于课时分配较少的了解层次的常识性内容的试题数量相对较少。试卷中掌握、熟悉、了解等各层次要求的内容分布分别为70%，20%和10%。章节覆盖率要达到80%左右，知识点覆盖率要达到70%。测量指标教育测量学的基本指标信度、效度、难易度和区分度的设置合理。建议难：较难：中等：较易题量的比例大致为1：3：4：2；难度系数在0.3-0.8之间，区分度适当，信度和效度较高。其它项目1.根据课程特点，主客观试题比例、定性定量试题比例合理。2.使用的试卷要求格式规范、卷面清晰、语法书写出错率低。3.各试题之间彼此独立，表达明确、简练，不会出现歧义。4.试卷要有答案以及准确、全面、合理的评分标准。5.近三年内考题的复用率不超过总量的15%。6.要在试卷中设置数目适当的“锚题”，以便作信度和效度等分析。7.要能确定非常重要问题试题（vip），或特别具有分析价值的试题。命题依据依据学校颁颁发的人才才培养方案案和教学计计划、针对对学科特点点、课程标标准、使用用主教材及及课程教学学实施计划划合理进行行。命题思想对本课程的的考核要全全面、有效效、符合因因材施教的的实际，能能反映课程程学习达标标的基本要要求。试卷卷命题既要要反映教与与学的重点点，又要照照顾全面；；既要能检检查学员对对基本概念念和基本知知识的理解解应用能力力，又要考考核其运用用已学知识识综合分析析问题的能能力。题型题量题型要多样样化，有利利于承载试试题信息、、设置疑问问，测量学学员对各考考点的理解解深度、掌掌握广度和和应用活度度。总题量量和各种题题型所占比比例适当，，要使中等等程度的学学员在规定定考试时间间内能完成成全部的答答题并留有有一定的检检查时间。。内容容分分布布试卷卷内内容容分分布布要要体体现现总总体体的的教教学学目目标标，，对对教教学学重重点点要要有有所所侧侧重重，，对对教教学学难难点点要要有有所所涉涉及及，，对对于于课课时时分分配配较较少少的的了了解解层层次次的的常常识识性性内内容容的的试试题题数数量量相相对对较较少少。。试试卷卷中中掌掌握握、、熟熟悉悉、、了了解解等等各各层层次次要要求求的的内内容容分分布布分分别别为为70%，，20%和和10%。。章章节节覆覆盖盖率率要要达达到到80%左左右右，，知知识识点点覆覆盖盖率率要要达达到到70%。。测量量指指标标教育育测测量量学学的的基基本本指指标标信信度度、、效效度度、、难难易易度度和和区区分分度度的的设设置置合合理理。。建建议议难难：：较较难难：：中中等等：：较较易易题题量量的的比比例例大大致致为为1：：3：：4：：2；；难难度度系系数数在在0.3-0.8之之间间，，区区分分度度适适当当，，信信度度和和效效度度较较高高。。其它它项项目目1.根根据据课课程程特特点点，，主主客客观观试试题题比比例例、、定定性性定定量量试试题题比比例例合合理理。。2.使使用用的的试试卷卷要要求求格格式式规规范范、、卷卷面面清清晰晰、、语语法法书书写写出出错错率率低低。。3.各各试试题题之之间间彼彼此此独独立立，，表表达达明明确确、、简简练练，，不不会会出出现现歧歧义义。。4.试试卷卷要要有有答答案案以以及及准准确确、、全全面面、、合合理理的的评评分分标标准准。。5.近近三三年年内内考考题题的的复复用用率率不不超超过过总总量量的的15%。。6.要要在在试试卷卷中中设设置置数数目目适适当当的的““锚锚题题””，，以以便便作作信信度度和和效效度度等等分分析析。。7.要要能能确确定定非非常常重重要要问问题题试试题题（（vip）），，或或特特别别具具有有分分析析价价值值的的试试题题。。六、、工工作作进进度度和和基基本本要要求求试卷卷质质量量分分析析是是系系统统工工程程中中的的一一部部分分，，也也是是我我校校有有待待加加强强的的工工作作内内容容之之一一。。工工作作需需要要分分层层次次、、分分阶阶段段的的进进行行。。关关键键在在领领导导、、科科室室是是基基础础，，考考试试中中心心应应该该发发挥挥抓抓总总、、规规划划指指导导、、总总成成的的重重要要作作用用。。整个个工工作作大大致致可可分分成成动动员员、、计计划划指指导导、、验验收收总总成成、、分分析析报报告告四四个个阶阶段段。。原原始始数数据据由由各各教教研研室室组组织织教教员员认认真真完完成成（（原原始始数数据据的的收收集集和和格格式式见见下下面面附附表表和和说说明明）），，部部院院系系作作整整体体验验收收、、电电子子归归档档，，在在考考试试中中心心指指导导下下写写出出各各自自的的分分析析报报告告，，考考试试中中心心完完成成总总成成结结构构和和整整体体分分析析报报告告，，整整个个过过程程有有检检查查验验收收。。具体体工工作作的的进进程程从从这这次次期期末末考考试试开开始始，，前前推推一一学学年年，，按按照照规规定定的的内内容容和和任任务务，，力力争争在在本本年年十十月月底底前前完完成成，，把把电电子子文文档档上上交交考考试试中中心心，，并并由由考考试试中中心心归归总总成成文文存存档档于于教教学学评评估估办办公公室室。。总总体体完完成成期期限限为为年年底底。。力力争争下下学学期期末末试试卷卷分分析析纳纳入入常常规规。。XXXX试卷卷质质量