试题编制技术与试卷质量分析

试题编制技术与试卷质量分析上海市真如中学吴长江一、试卷卷编制前前的准备备1、命题前前的思考考点2、命题设设计的一一般原则则3、试卷编编制的基基本程序序CompanyLogo二、试卷卷编制的的技术要要点1、命题双双向细目目表设计计2、几类典典型题型型编制要要求3、命题预预测的评评价指标标4、命题需需要注意意的几个个问题三、试卷卷质量分分析与评评价1、考试结结果的基基本分析析2、质量分分析报告告的撰写写CompanyLogo一、试卷卷编制前前的准备备命题容易易又很难难，一份份好的命命题更难难。命题体会会与考量量：规范负责责的态度度一定的文文字功底底丰富的知知识储备备多研究经经典试题题试卷走钢丝的的艺术；；遗憾的艺艺术；人文素养养的考验验；科学素养养的考验验；教育测量量技术。。规范负责责的态度度一定的文文字功底底丰富的知知识储备备多研究经经典试题题试卷CompanyLogo1、命题前前的主要要思考点点思考准备备：（1）明确考考试的性性质测验·诊断性考考试知知识与与技能的的掌握；；常常模模参照考考试会考·水平考试试稳稳定的认认知能力力特质标标准参参照考试试智力测试试·学习能力力考试潜潜在在的学习习能力和和学术发发展倾向向标准参照照考试CompanyLogo·常模参照照测验——是指以学学生团体体测验的的平均成成绩为为参照标标准，说说明某一一学生在在团体中中的相对对位置，，将学生生分类排排队。·标准参照照考试——是指以体体现教育育教学目目标的标标准为准准，看学学生是否否达到标标准以及及达成标标准的程程度。它它主要不不是用于于比较个个人之间间的差异异。CompanyLogo常模参照考试和标准参照考试比较维度标准参照考试常模参照考试目的·确定每个学生是否达到课程目标规定的要求·确定每个学生在课程开始前后获得知识、技能、能力等的差异，或水平的差异·对学生在某一内容领域的知识、技能、能力等进行排队·区分高分和低分的学生内容·严格依照课程标准，要求有较好的覆盖面·以课标描述为难度依据，要有难度梯度，尤其是合格水平要求充分的表达·每种知识、技能等都表述为教育目标或课程目标·题目要有较好的区分度·由于时间有限可能放弃对覆盖面的要求试题特征·每个目标至少有四道试题，以获得适当的学生行为样本，并且最大程度地降低偶然因素效应·每道试题难度是平等的·测量每个目标的试题量一般小于4道·试题的难度是变化的·试题要有比较好的区分度分数解释·通常标定合格及其他等级水平·每个学生的成绩与预先设置的标准比较，与其他考生的表现无关·报告考生在每个测量目标方面的学习情况·考生成绩通常与其它考生成绩比较·分数通常以百分位分数，或其他标准分数表示·通常总体报告学生的水平而不分测量目标CompanyLogo（2）把握考考试对教教学发展展的导向向性·反映课程程改革的的要求；；·体现学科科的特点点；·引领学生生学习。。（3）掌握考考试对象象的特点点与水平平·学生学习习与心理理特点·阶段知识识掌握的的水平区区分；·能力反映映的特点点。CompanyLogo（4）考虑足足够的内内容抽样样代表性性·与备课组组交流；；·抽取好、、中、差差学生练练习与试试卷；·与不同层层面的学学生交流流。（5）选择合合适的试试题结构构·试卷内容容组成；；·试卷编排排顺序；；·试卷难易易控制。。CompanyLogo2、命题设设计的一一般原则则（1）命题的的目的性性；（2）内容的的代表性性；（3）格式的的规范性性；（4）表述的的简明性性；（5）答案的的确定性性；（6）题目的的独立性性；（7）创意的的公平性性；（8）测试的的实效性性。CompanyLogo命题要全全面考查查学生课课程目标标的达成成状况——立足全面面性、注注重代表表性、体体现导向向性；考察内容容的均衡衡性；适度的题题量与难难度；恰当的题题型结构构；适度的自自主性和和开放性性；试题呈现现方式的的多样化化。在此基础础上，综综合体现现：基础础性原则则、发展展性原则则、科学学性原则则、时代代性原则则、开放放性原则则、规范范性原则则。CompanyLogo3、试卷编编制的基基本程序序（1）拟定命命题计划划·各种题型型的题量量及分数数分配；；·各项考试试内容的的题量及及分数分分配；·能力考查查的重点点及各能能力层次次的分配配；·考试难度度及各类类难度比比例。CompanyLogo（2）（根据据命题计计划）编编制双向向细目表表·确定考试试内容要要目；·确定考试试目标层层次；·确定考试试要目下下的权重重；·试题难度度预估。。CompanyLogo（3）（根据据双向细细目表））编制试试题并组组卷·题型的选选择与安安排（先先按题型型，再按按难度））；·试题的难难度控制制与预估估（整卷卷难度与与分题难难度，有有序层进进）；·对试题区区分度的的把握；；·开放（或或探究））试题形形式与内内容的探探索；·一些重要要的内容容及方向向定位（（如写作作题）；；·答案与评评分标准准的制定定。CompanyLogo（4）试测并并修订·在保密中中选取典典型非我我校学生生进行试试测；·根据试测测情况分分析分调调整命题题；·专家审卷卷；·修正并定定稿。CompanyLogo二、试卷卷编制的的技术要要点1、命题双双向细目目表设计计目的——设计试卷卷的蓝图图，使命命题者明明确测验验的目标标，把握握试题的的比例与与分量，，提高命命题的效效率和质质量。内容——考查的范范围、具具体知识识点、测测试目标标、题型型、分值值分布、、难度分分布。操作——确定试卷卷要考查查的目标标；明确确要考查查的知识识内容（（知识点点）；根根据考查查目标和和知识的的重要程程序给予予不同的的比重；；合理安安排好各各部分权权重，编编制出双双向细目目表。CompanyLogo范例1测验目标知道理解运用分析与综合探究合计测验内容内容范围Ⅰ11397232内容范围Ⅱ3565221内容范围Ⅲ1534215内容范围Ⅳ34815内容范围Ⅴ1626217合计63224308100CompanyLogo范例2命题双向向细目表表考试内容（内容块）选择题简答题证明题应用题分析题合计识记理解…识记理解…分析综合…应用…应用分析综合创造内容12305050015内容20334030215内容308213900335内容404215906535合计218717188010100CompanyLogo范例3试卷组合合双向细细目表题号分数能力题型难度系数内容记忆理解分析综合其他判断选择填空计算问答其他1第一章第四节1230.62第三章第二节1120.73第七章第一节330.64第一章第四节330.7…………………………………小计8311加权难度系数总计1001000.62CompanyLogo加权难度度分数计计算公式式：

＝＝＝，，….为权注意：能能力各栏栏目分数数合计和和题型各各栏目分分数合计计均应为为100（或150）分。CompanyLogo2、几类典典型题型型的编制制要求（1）测试题题型的分分类题型客观题（封闭式）主观题（开放式）选择题提供型是非题配对题选择题填空题改错题名词解释题简答题计算题证明题论述题写作题设计题翻译题CompanyLogo客观性试试题与主主观性试试题比较较客观题（封闭式）主观题（开放式）信度较高较低效度较低较高覆盖面较宽较窄陈述性知识较适宜较不适宜程序性知识较不适宜较适宜猜测可能性测验时较大测验前较大常模的建立较易较难CompanyLogo（2）选择题题的编制制选择题的的编制题型特征适用范围编制要领由一个“题干”和若干“选项”所构成。题干可用不完全陈述或疑问句表示，用于实现一个问题情境；选项，由一个正确或最佳答案和几个似真的错误诱答项或非最佳答案项组成。适合用文字、数字和图形等不同材料编题，可考查记忆、理解、应用、推理、判断、比较、分析等多种能力。该类题有多种形式，如配伍式、比较式、因果式、组合式、类推式等，其测量功能各有侧重。题干设问明确，表述简要，且尽量创设新情境；各选项的内容和形式要相互对等，数目尽量一致，且用词勿重复；正确项随机定位，且似真非真；干扰项似假非假，保证适度干扰性；每题仅有一个测试中心，且各题相互独立，避免链式。CompanyLogo编制选择择题的注注意要点点：·每题仅围围绕一个个测试中中心·题意完整整，表述述简明·避免提供供解题线线索·题干应尽尽量创设设新的情情境·题干尽量量以正面面方式叙叙述CompanyLogo·各选项语语词切勿勿重复·选项只间间不应相相叠·干扰项诱诱答须似似是而非非·各题彼此此独立，，避免链链式·忌用“以以上皆对对”、““以上皆皆错”选选项·选项数尽尽量一致致，形式式大体相相同·正确项目目须随机机排位CompanyLogo（3）填空题题的编制制题型特征适用范围编制要领提供一个完整的陈述，要求被试把缺少的结论填上，全题可留1－2处空格，且多置于句中和句尾。适宜测量词组知识、名称或日期、对概念的简单理解及记忆，解决数量问题的能力等。属于“回忆性”测量。留空处须是关键字词，且与上下文联系密切；空格不宜太多；避免直接引用教科书原句；准备一个正确答案和可接受的变式的标准。CompanyLogo（4）简答题题的编制制题型特征适用范围编制要领由一个问句或陈述句构成，要求学生作答时提供适当的字词、短语、符号、观点及结论等。适宜测量记忆及简单理解。可考查术语知识、特定事实知识、原则的知识、方法和程序的知识；还可考查简单解释资料或使用数字符号的技能。答案唯一，且简单具体，尽量采用疑问句出题；应测学科知识的重要概念；不可按书原文抄题；说明答题要求，无需论述、论证；需以数字作答的，应说明表示单位。CompanyLogo（5）论述题题的编制制题型特征适用范围编制要领是一种要求被试根据题目自己立意、选材、组织与表达。它属于自由反应型试题，包括论述题和作文题。适合测量综合运用知识的能力、组织材料能力和文字表达能力，甚至考核评价能力和创造能力。可以了解学生对问题的理解深度和思考过程明确规定作答范围和方法，避免题意空泛、笼统；设置新情境，让学生应用知识解决新问题；题目数量需适度；不给被试提供选答试题机会；备用数个“理想”答案，评分标准具体，易操作。CompanyLogo（6）应用题题的编制制题型特征适用范围编制要领叙述一个具体的情境并给出一些有关的数据或资料，让被试解决所提出的问题。适合测量计算技能、数学和科学推理，以及运用知识到新情境中的能力。该类题常用于数学和自然科学领域的测验。解题说明清楚、完整；题目中应含解题所需的一切条件；题目内容应采用新情境材料；各测题答案间互相独立；文字简明。CompanyLogo（7）开放性性试题的的编制开放性试试题的命命制·条件开放放型、过过程开放放型、结结论开放放型以及及这三种种题型的的综合形形式。·这些形式式还可以以进一步步细分，，如在答答案开放放型中，，可以再再分为理理论运用用（知识识视角））开放、、论据素素材（佐佐证事例例）开放放、表达达方式开开放和评评分要求求开放等等。在各各个学科科中，其其具体表表现形式式有所不不同。CompanyLogo方法与策策略①可选择择作答：：学生可可以选择择部分试试题或一一个试题题中的若若干小问问题作答答，增加加答题的的可选择择性，有有利于发发挥学生生的优势势智能，，表现学学生的个个性和特特长。②陈题新新用：对对传统试试题进行行改造，，省略去去其中的的部分条条件，或或对问题题提出不不同的解解决方向向，或要要求用尽尽可能的的角度解解决问题题。③从生活活素材入入手：选选取社会会热点、、生活焦焦点和学学生生活活经验作作为素材材来设计计问题，，引导学学生运用用所学知知识独立立地解决决生活问问题。④设置黑黑箱：将将一个事事物产生生、发展展过程和和最终结结果中的的过程隐隐藏起来来，即制制造一个个黑箱，，让学生生发挥想想象力，，提示黑黑箱的内内幕。CompanyLogo⑤假设情情景条件件：在一一定条件件下假设设某种情情景，探探求事物物的发展展状态；；或给出出某种确确定的情情景，探探求由于于条件的的变化，，可能引引起什么么样的反反应。⑥例举事事实：给给出一定定的规律律或原理理，要求求学生搜搜集与之之相关的的现象或或事实，，证明这这一理论论。⑦学生自自编自答答：在一一定背景景之下，，让学生生根据试试题提供供的素材材，自己己提出问问题，并并分析解解决问题题。⑧超越课课本知识识：超越越课本中中的字面面内容，，挖掘隐隐藏一于于文字背背后的思思想，考考核学生生的科学学精神与与人文思思想。CompanyLogo⑨巧用设设问：调调整问题题的设问问指向，，引导学学生摆脱脱传统的的思维方方向，寻寻找新的的考虑问问题的角角度。⑩引导推推理：给给出一定定的材料料或条件件，让学学生自主主推导出出可能产产生的结结果，或或者给出出一定的的结果，，让学生生反向推推导出它它所需要要的条件件。⑪补充材材料或结结果：给给出不完完整的材材料或事事物进程程，通过过学生自自主想象象，补充充材料或或推测结结果。⑫调整评评分要求求：评分分要点充充分考虑虑到学生生答题的的各种可可能性；；对于某某些有创创意的答答案或要要点，应应该加以以加分奖奖励，等等等。CompanyLogo（8）主观题题命题评评分的基基本要求求·不要逼着着或诱导导学生说说假话是是最起码码的要求求；·给定标准准答案，，以命题题者之心心度学生生之腹的的题出了了还不如如不出；；·主观题发发挥学生生的创造造性，有有一定开开放性并并不表明明可以题题可以随随便出，，答案可可以随便便写，清清晰的评评分标准准是必要要的；·如果测量量的行为为目标能能够用客客观题来来测，就就尽量不不要用主主观题；；·挑选的材材料应该该与学生生学习经经历过的的材料有有类似性性或是全全新的材材料；CompanyLogo·应该用清清晰，明明确的语语言表述述背景材材料和问问题；·对材料分分析题而而言，设设计试题题应该要要求学生生对材料料进行分分析和解解释；·设计的试试题数应应该与背背景材料料的长度度相匹配配；·对试题的的赋分应应该合理理；·对每个问问题给恰恰当的时时间完成成。CompanyLogo3、命题预预测的评评价指标标（1）难度控控制·定义：学学生完成成题目和和项目任任务时所所遇到的的困难程程度。。难度值值以P表示。

公式1：通过率率P＝,R表示答对对某题的的人数，N表示测试试的总人人数。

公式2：得分率率P＝，，X表示某题题的平均均分，W表示某题题总分。。·注意：通通常对客客观题计计算难度度时选择择公式1；通常对主主观题计计算难度度时选择择公式2。CompanyLogo全卷难度度用加权权难度平平均数公公式计算算。＝＝＝其中分分别为的的权数数i＝1、2…K。CompanyLogo·高考难度度要求：：全卷难度度0.5~~0.6；试题难度度0.3~~0.7，接近正正态分布布；易：中：：难＝3:5::2容易题P值为0.7以上；中中档题P值为0.5~~0.7；难度P值为0.3~~0.5。·试卷难度度计算方方法：假假设容易易题、中中档题和和稍难题比例按按3:5::2预测，即即30%的试题难难度P值为0.7以上；50%试题的P值为0.5~~0.7；20%的试题P值为0.3~~0.5。CompanyLogo·影响试题题难度的的因素情境的熟熟悉性；；需要提取取，应用用元素本本身的难难度，熟熟悉性和和数量；；已知条件件是否完完备或冗冗余；先前是否否存在模模式能够够参考；；概括程度度的高低低，如是是否需要要建立模模型，以以及所建建模型的的复杂性性和概括括性程度度。CompanyLogo·试题（试试卷）难难度控制制运用“难难度相关关因素表表”和““难度分分数对应应表”，，掌握试题难难度预估估与控制制方法。。CompanyLogo难度相关关因素表表点数1234目标要求识记理解运用综合信息强度1－2点3－4点5－6点7点以上熟悉程度很熟悉（常见基本练习题）熟悉（训练过的练习题）一般（改造过的练习题）生疏（未见过的生题新题）结构层次很简单（结构单一、一步到位）简单（拐一步到位）复杂（拐两步到位）很复杂（拐三步到位）CompanyLogo难度系数数对应表表难度层次最易中易稍易中下中中中上稍难中难最难因素累加4-55-66-77-88-99-1010-1111-1212以上难度系数1-0.950.95-0.90.9-0.80.8-0.70.7-0.60.6-0.50.5-0.40.4-0.30.3以下CompanyLogo·影响试题题难度应应对策略略题目条件件的复杂杂程度……适可而止止题目条件件表述的的隐藏性性…提倡（联联系实际际）解答题目目所需的的心智技技能、不不过份是否隐含含科学探探究方法法…提倡解答过程程的数学学手段……不过份需要文字字表达的的水平……适当以往解题题经验的的影响……提倡新情情况CompanyLogo（2）区分度度的控制制·区分度。。区分度度是反映映试题能能否鉴别别学生能能力高低低的指标标，由某某题答对对人数与与答错人人数相比比较而确确定。如果某个个试题，，总分高高的学生生与部分分低的学学生都没有做做对，或或全做对对，则说说明该题题没有区区分度。。假如一个个试题对对总分低低的学生生出错的的人数比比总分高高的学生更更多，则则表明该该试题有有较高的的区分度度。CompanyLogo区分度计计算公式式为：D＝－－其其中中，D为区分度度，和和分分别为为高分组组在某题题上的难难度和低低分组的的难度。。区分度度在0.4--0.6之间为宜宜。CompanyLogo·区分度与与试题难难度密切切相关，，要改变变试题区区分度，，即必须须调整试试题难度度。最难难和最易易的试题题的区分分度都很很低，区区分度最最大的试试题，其其难度一一般在0.3--0.6。提高等等级间区区分度，，主要应应该：准准确控制制30%的试题难难度，增增加0.6的题量。。·对于常模模参照来来说，区区分度D≥0..4为优；0.39≥D≥≥0.3，良好；；0.29≥D≥≥0.2，一般；；D＜0.2劣，应该该淘汰。。CompanyLogo·对试题难难度（P）与区分分度（D）进行总总体衡量量P值10.90.70.50.30.10.0D最大值0.00.20.610.60.20.0人的多数数心理特特征呈正正态分布布，一个个测验的的各道题题目之间间或多或或少存在在着一定定的相关关；因此此一般采采用使题题目从易易到难排排列，而而非皆固固定在P＝0.5左右。高高考要求求D≥0..3CompanyLogo·区分度的的计算程程序将考生的的部分由由高到低低排列（（预测时时是预估估的）；；从最高分分开始向向下取全全部试卷卷的27%做为高分分组；从最低分分开始向向上取全全部试卷卷的27%做为低分分组；计算高分分组、低低分组在在某题的的难度与与；；客观题用P＝＝

主观题用P＝＝CompanyLogo客观题区分度D＝－主观试题题区分度度D＝CompanyLogo其中表表示接受受测验高高分组在在该题上上的总得得分数，，表表示低分分组学生生在该题题上的总总得分数数，N表示参加加测验高高分组（（或低分分组）人人数，即即总人数数的27%，H表示该题题最高分分，L表示该题题最低分分。一般也可可用D＝，，：：高分分组某试试题的平平均分，，：：低分组组某试题题平均分分，：：某某试题的的满分。。整个试试卷的区区分度，，是所有有试题区区分度的的平均值值，可用用加权平平均数求求出。CompanyLogo·注意：区区分度比比较小并并不一定定说明试试题不好好。首选选应检查查样本大大小，如如果样本本太小，，可能会会导致相相关系数数不稳定定。其次次，应该该检查试试题的难难度，如如果试题题难度过过大或过过小，都都可能导导致试题题的区分分度降低低。第三三，应检检查试题题本身是是否有问问题，如如题干表表述的不不明确，，题干存存在某种种给考生生提示的的线索或或其他技技术性错错误。如如果没有有上述三三方面的的问题，，那么试试题的低低区分度度可能揭揭示学校校教学或或考生复复习方面面可能存存在某些些问题。。CompanyLogo（3）信度的的控制（（暂不考考虑）·信度即测测量结果果的可信信程度（（稳定性性程度）），如果果用同一测量量工具反反复测量量同一特特质对象象，则多多次测量量结果的一致致性程度度就叫信信度。·信度的估估计方法法重测信度度：用同同一个测测验或评评价表对对同一组组被试施施测两两次所得得结果的的一致性性程度。。用途在在于估计计测验结结果经过过一段时时间后是是否仍然然维持稳稳定、一一致的特特性。复本信度度：是指指两个平平等测验验测量同同一批被被试者所所得结果果的一致致性程度度（同一一时间或或间隔一一段时间间进行）），真正正的平等等测验非非常重要要。CompanyLogo分半信度度：将一一个测验验分成对对等两半半后，所所有被试试在两半半上所得得分数的的一致性性程度。。按题号号的奇偶偶分半、、按难度度分半、、按题目目的内容容分半。。评分者信信度：多多个评分分者给同同一批人人的答卷卷进行评评分的一致致性程度度。主观观题特别别是作文文题的评分分信度值值得研究究。CompanyLogo提高信度度的办法法：A、增加题题量、提提高覆盖盖率；B、提高区区分度，，准确反反映考生生差异；；C、减少考考试过程程中非智智力和情情感因素素干扰；；D、提高评评分的客客观性和和准确性性。·高考要求求：选择择题总分分信度≥≥0.9，非选择择题总分分信度≥≥0.7，全卷信信度≥0.8CompanyLogo（4）效度控控制（暂暂不考虑虑）·效度是指指本次考考试与考考试目标标的相关关程度，，即考试试内容，，形式、、结果对对考试目目标的体体现情况况。提高效度度的方法法：合理规定定考试目目标；科学确定定考试内内容；选择适宜宜的考试试方式；；提高考试试信度；；不得滥用用考试成成绩。CompanyLogo·效度包括括：内容效度度：试题题与教学学的目的的和内容容相符的的程度结构效度度：测验验的结构构与目标标要求相相符的程程度标准相关关效度：：测验与与作为标标准的测测验相符符的程度度CompanyLogo4、命题需需要注意意的内个个问题（1）情境设设置问题题·设置“情情境”的的本质是是提供一一个平台台，能够够让学生生针对知知识、技技能、过过程方法法等进行行提取、、组合、、尝试、、判断以以及模式式化等等等，有时时这个过过程比结结果更为为重要。。·根据学科科和测试试目标的的不同，，情境的的现实化化和生活活化程度度是不一一样的。。·不要为了了情境而而设置情情境。·虽然有些些情境不不要求真真实，但但需要合合理，一一定不能能让学生生产生迷迷惑。CompanyLogo（2）试题反反映考试试功能和和目标；；（3）不出超超纲题、、偏题、、怪题和和其他没