测验的编制实施和评分

第三章测验的编制、实施和评分孙海龙第一节编制测验的一般程序一、确定编制测验的目的（一）确定测量对象年龄教育水平文化背景（二）分析测量目标1、确定能表征所欲测量的心理结构的行为如何使我们所选择的行为样本更具代表性：（1）回顾以往的研究成果（2）考虑时代特点（3）了解受测者的实际情况（4）向专家和资深者质询、请教2、确定每一类行为的项目比例（三）确定测验的用途测验是用作选拔、预测还是诊断测验是常模参照测验还是标准参照测验二、拟定测验编题计划指出测验所包含的内容和所要测定的各种技能，以及对每一个内容、技能的相对重视程度。编题计划一般以双向细目表的形式出现。编题计划的作用：（1）在编题时指出应写哪些种类的题目及写多少。（2）题目编好后可根据编题计划确定测验题目是否恰当地代表了所要测量的领域。（3）在记分时可按编题计划确定各类题目的分数。三、开发测验项目（一）收集测验编制资料题目素材的来源：理论分析、相关的研究文献现有的相关量表开放式问卷1、对智力测验的题目素材的要求题目素材要丰富多样。题目素材要具有适宜性。题目素材要尽量避免受文化知识水平的影响。题目素材要具有普遍性。2、对学科测验的题目素材的要求题目素材应是该学科内容的代表性取样，能反映各级教学要求，能把学习水平不同的学生很好地区分开。3、人格测验的题目素材的选取方法经验法：搜集能反映经验效标组被试特点的材料作为题目素材。逻辑法：根据理论内涵，运用逻辑推理的方法，选择具有表面效度的材料作为题目素材。因素分析法：从社会生活的各方面搜集与主题有关的材料作为编写题目的素材，通过因素分析进行筛选。（二）选择项目形式1、在选择题目形式时，要注意：测验的目的和材料的性质接受测验的团体的特点各种实际因素2、常见的题目形式（1）固定应答型（封闭性）题目让受测者从测验编制者事先定好的答案中辨认出正确答案，包括选择题、是非题、匹配题等。优点：单位时间内可以施测很多项目，从而能保证取样的广泛性，使测验更有效。评分客观，加上题目数量多，可以减少随机因素的影响，从而能保证测验的可靠性。可以通过改变错误答案的迷惑性来调整题目的难度。阅卷方便迅速。保密性好，好的题目可存入题库重复使用。缺点：有固定答案，难以测量材料组织力、创造力等高级心理机能。编写困难费时，需要一定技巧。（2）自由应答型（开放性）题目让受测者用自己的语言或行动来对某一问题作出回答，包括填充题、简答题、应用题、论文题、联想题、操作题等。优点：反应自由，可获得较丰富的反应。可测量高级的心理机能。缺点：题目数量一般较少。评分难以客观化、标准化。（三）编写测验项目包括：写出、编辑、预试、修改等过程。1、命题的一般原则（1）试题要符合测验的目的，内容取样要有代表性。（2）题目格式不要使被试发生误解。（3）文句要简明扼要，要避免使用艰深的字词。（4）应有不致引起争论的确定答案(创造力测验、人格测验除外)。（5）各个试题必须彼此独立，不可互相牵连，题目中不可含有暗示本题或其它题正确答案之线索。（6）题目内容不要超出受测团体的知识和能力。（7）所提问题应避免涉及社会禁忌与个人隐私。（8）施测与评分省时。例如:1.句子补全我最大的担心是…………我只是希望我的母亲………最困扰我的事情是……..我不喜欢……2.基于你对乔治.桑,玛格丽特.格拉斯、尼采……的著作的了解,评价她们的情绪稳定性,情绪调节的能力,以及沮丧感的程度,从每个人的著作中,引用合适的参考语句来支持你的答案.3.皮亚杰作为()心理学家而著名.A.临床B.心理测量C.发展D.社会

(四)”夫妻关系量表”的形式与素材将前面的行为样本转换为测题,例如:自由发表意见→我能容易,轻松的在对方面前发表意见;在对方面前发表意见之前,我总会顾忌对方对我的看法……..帮助克服困难→我的配偶能够在我困难时帮助我;我的配偶经常主动帮助我;……夫妻之间谈论性的问题→我与对方之间能够轻松的谈论性的问题;我与对方对性的问题都不是特别在意;我不愿意与对方谈论性问题;与对方谈论性的问题时我有很多顾虑;……2、编写题目时要注意：（1）题目范围要与测验计划所列一致。（2）题目的数量要比最后所需的数目多一至几倍。（3）题目的难度必须符合测验目的的需要。（4）题目的说明必须清楚明白。四、预测和项目分析（一）预测注意：（1）预测对象应取自将来正式测验准备应用的群体，取样要具有代表性。（2）预测的实施过程与情境应力求与将来正式测验时的情况相近似。（3）预测的时限可稍宽一些。（4）在预测过程中应对受试者的反应情形随时加以记录。A.被试样本要有代表性,尤其要注意包括待测属性各种可能值的个体,例如:夫妻关系中各种夫妻关系的样本都应具备B.适合的样本容量,对于一个区域性常模,一般的心理特质采样应在1200人左右,试验性采样的大小约为常模样本的25%.（二）项目分析质的分析：内容取样是否适当，题目的表达是否清楚等。量的分析：确定题目的难度、区分度、备选答案的合适度等。复核：在两个独立样本中进行项目分析的过程。五、合成测验（一）项目的选择好题目的标准：只测定所需要的特征，并能对该特征加以有效区分的、难度合适的题目。（二）项目的编排1、逐类直进式2、混合螺旋式（三）编制复本测验的各份复本必须等值，所谓等值必须符合下列条件：（1）各份测验测量的是同一种心理特性。（2）各份测验具有相同的内容和形式。（3）各份测验的题目不应有重复的地方。（4）各份测验题目数量相等，有大体相同的难度和区分度。（5）各份测验的分数分布（平均分和差异度）大致相等。六、测验的标准化（一）内容的标准化即对所有受测者应施测相同的或等值的题目。（二）施测过程的标准化1、指导语通常包括：测验目的的说明，受测者应如何作答的指示等。2、时限（三）评分的标准化为使测验评分客观，要求：（1）对反应的及时的和清楚的记录。（2）有记分键。（3）将受测者的反应和记分键比较，将反应归类。七、测验质量的检验信度效度八、编写测验手册主要内容：（1）本测验的目的和功用。（2）编制测验的理论背景以及选择题目的根据。（3）测验的实施方法、时限及注意事项。（4）测验的标准答案和评分方法。（5）常模资料。（6）测验的信度、效度资料。几种主要的测验项目类型1论文题即论述题。注意：1）限定题目范围，不要过于空泛2）文字表述上多使用为什么，解释，比较，运用词汇3）不要只是死记硬背，最好能够考察被试的运用知识能力4）施测前对要点和思路要有准备和说明，以备评分5）不要采用几题选作的方式。2选择题优点：考察范围广测试简便，可大规模施测缺点：答案固定，不利于在创造性、文字组织运用能力上的测试命题有难度。3判断题4匹配题5填空题6简答题7操作题8联想题和投射题第二节测验的实施一、主试的资格测验的主持和实施者在心理测量中被称为主试。第二节测验的实施一、主试的资格二、测验的选择三、测验前的准备工作四、测验实施的程序及要素五、被试误差及控制方法一

、主试的资格（一）、知识结构（二）、专业理论知识和专业技能（三）、职业道德（一）、知识结构主试者的知识结构是指开展心理测验工作所必须具备的基础知识和与专业相关的知识。还应根据自己的工作领域具备相应的本行业的专业知识。（二）、专业理论知识和专业技能1.专业理论知识2.专业技能熟悉有关测验的内容、适用范围、测验程序和记分方法等。（三）、职业道德1.测验的保密和控制使用2.测验中个人隐私的保护二、测验的选择1、所选测验必须适合测量的目的2、所选测验必须符合心理测量学的要求三、测验前的准备工作（一)、测验前的准备工作（二）、测验中主试的职责（三）、建立协调关系（一）、测验前的准备工作1.预告测验2.准备测验材料3.熟悉测验指导语4.熟悉测验的具体程序（二）、测验中主试的职责首先，应按照指导语的要求实施测验其次，测验前不讲太多无关的话。第三，对于被试的反应，主试不应做出点头、皱眉、摇头等暗示性反应第四，对特殊问题要有心理准备（三）、建立协调关系这种关系指的是主试和被试之间一种友好的、合作的、能促使被试最大限度地做好测验的一种关系。四、测验的实施（一）指导语和时限1指导语针对主试和被试的两个部分。主试指导语单独针对主试，明确测验的进一步说明和注意事项，突发情况的处理和可能被试一些问题的解答。被试部分一般会印在测验题目的开头。主要是告知被试测验的主要目的，测验的大致情况，如题目构成，被试作答方式如是填写、打勾。2.时限大多数典型行为测验是不受时间限制的但在最高作为测验中，速度是需要考虑的重要因素之一。（二）作记录（三）应对被试的要求（四）主试的职责1遵从指导语2测验前不要讲无关的话语3主试在测验时集中注意力4主试不应过多带感情色彩或对被试回答有任何的暗示，干扰被试作答。5测验时也可适当强化被试行为，要求他们继续认真作答6鼓励被试回答7特殊问题准备8建立和谐信任关系五、影响被试作答的因素（一）测验技巧（二）练习效应（三）教练测验（四）应试动机（五）测验焦虑（六）反应定势1速度-准确性衡量2肯定（否定）定势3偏好特殊位置4偏好较长选项5猜测定势（一）、应试技巧与统习效应1.应试技巧“测验油子”2.练习效应（二）、动机与焦虑因素1.应试动机在测量成就、智力和能力倾向等变量时，只有被试动机强烈，才可能尽力回答，取得好成绩。2.测验焦虑（三）、反应定势反应定势亦称反应风格(responsesetsorstyles)，是指独立于测验内容的反应倾向，即由于每个人回答问题的习惯不同，而使能力相同的被试得到不同的测验分数。几种常见的反应定势：1.求“快”与求“精确”的反应定势除非“反应速度”本身即为重要的研究目标，否则应让被试有充分的时间反应，同时应该注明每题的答题时间，以减少求“快”与求“精确”定势的影响。2.喜好正面叙述的反应定势在编制是非题时，“是”“否”题大致相等或答“否”题略多，是控制肯定定势约有效方法。3.喜好特殊位置的反应定势正确答案的位置在整个测验中出现在各位置的概率相等，就可以控制这种位置定势。4.喜好较长选项的反应定势5.猜测的反应定势第三节测验的评分和解释一测验的评分（一）原始分数的计算原始分数是指根据被试的实际作答，按照测验的评分标准，对每个测验项目及整个测验上所作反应评出的分数。学业测验中即为卷面分。有的测验有几个分测验，炫耀求出总分，分别算出每个分测验的分数。（二）原始分数的转换标准分数和常模二、测验分数的解释（一）如何看待测验分数的意义基本原则1主试应充分了解测验的性质与功能2对导致测验结果的原因，解释应谨慎，不要过于片面极端3应充分考虑测验本身的信效度和局限性4解释分数应考虑其他的参考资料5最好将分数在一个区间范围内解释，不要过于固定特定值6不同测验分数之间一般不能之间比较（二）向被试解释分数1语言通俗易懂准确生动。2要确保被试明白测验的结果和目的，不要误读测验。比如智商高低不等于成就大小3如果是常模分数要明白和什么常模团体比较4要使得被试明白分数是如何运用的5考虑到分数可能给被试心理带来的影响6测验结果应对无关人员保密7要对低分被试谨慎解释总结如下根据心理测验的特点进行分析不能把分数绝对化，更不能仅仅根据一次测验的结果轻易下结论一个人在任何一个测验上的分数都是其遗传特征、测验前的学习与经验、以及测验情境的函数为了对测验做出确切的解释，仅有常模资料是不够的，还需要有信效度资料不同测验的分数不能直接加以比较不把测验分数直接告诉被试本人、家长、学校老师等，应告诉测验分数的解释和建议避免使用专业术语保证当事人指导测验测量或预