心理测量学测验效度

1、关于心理测量学测验的效度第一张，PPT共六十二页，创作于2022年6月 （Validity）效度的概念效度评估的方法影响效率的因素 第二张，PPT共六十二页，创作于2022年6月 一 、效度的概念效度的定义效度的特点第三张，PPT共六十二页，创作于2022年6月一、效度的概念（一）效度的定义信度SX= ST + SE效度SX= SV + SI + SE随机误差有效方差SV系统误差SI第四张，PPT共六十二页，创作于2022年6月与测验目的有关的有效SV2和实得SX2 的比值效度效度定义第五张，PPT共六十二页，创作于2022年6月信度高，给 SV 增加提供可能能否提高效度，再看SI大小信度高不

2、一定效度高效度要高，SV须占较大比重，ST效度高，信度必高ST2（二）信度与效度的关系第六张，PPT共六十二页，创作于2022年6月（二）信度与效度的关系信度是效度的必要条件非充分条件第七张，PPT共六十二页，创作于2022年6月效度是一个相对的概念。效度是两种误差的综合反映。效度的确定要从多方面搜集证据。（三）效度的特点第八张，PPT共六十二页，创作于2022年6月 二、效度评估的方法根据人们对测验目的解释的不同:内容效度结构效度效标效度 考研题第九张，PPT共六十二页，创作于2022年6月（一）内容效度概念评估方法特性(content validity)第十张，PPT共六十二页，创作于20

3、22年6月（一）内容效度1、概念定义：测验对于应测内容的代表性程度。内容高的条件:内容范围明确取样有代表性 应用： 成就测验 职业选择测验第十一张，PPT共六十二页，创作于2022年6月 2、特性特定性：测验编制者与使用者的关系避免与表面效度（ face validity ）混淆 一个测验看上去适合欲测目的的程度，而非实际适合欲测目的的程度。 测验在使用者或被试主观上感觉有效的程度。 编制测验应适当考虑表面效度。 最高作为测验表面效度可高些 其他测验则希望表面效度低些第十二张，PPT共六十二页，创作于2022年6月含义专家按测题和假设内容范围作出的符合度判断。作法与程序确定总体范围；编制双向细

4、目表；选择测验项目；制定评定量表。3、评估方法1）专家判断法（逻辑分析法）第十三张，PPT共六十二页，创作于2022年6月局限不同专家对内容范围会有不同的理解。不同专家对同一测验内容效度的判断可能不一致；无良好的数量指标描述这种符合性的程度；第十四张，PPT共六十二页，创作于2022年6月2）经验推测法检查不同年级被试总分与每题分数变化情况若随年级增高总分和每题通过率也升高，可 推论该测验基本测量了教学内容和目标。检查不同年龄儿童测验分数的变化情况是否随年龄增长而增加。第十五张，PPT共六十二页，创作于2022年6月信度指标复本信度r高：内容效度高（也可能两个都低）r低：至少一个缺乏内容效度再

5、测信度 首测-训练-再测-成绩提高3）统计分析法第十六张，PPT共六十二页，创作于2022年6月（二）构想效度定义确定步骤估计方法(construct validity)第十七张，PPT共六十二页，创作于2022年6月（二）构想效度 1、定义构想（结构）解释行为的理论框架或心理特质的抽象概念。结构效度 测验在多大程度上测量了所要测的理论构想。应用 智力测验和人格测验第十八张，PPT共六十二页，创作于2022年6月2、确定步骤 提出理论提出假设检验假设解释被试的测验表现测验成绩的假设逻辑和实证检验方法第十九张，PPT共六十二页，创作于2022年6月关于情绪稳定性的假设测验分数和心理学家的评价有某

6、种程度的相关；精神病人和正常人的测验分数是有区别的；测验分数和同伴的评价有一定的关系；测验分数与IQ没有什么关系；测验分数和性别没有关系。第二十张，PPT共六十二页，创作于2022年6月关于智力的假设智力随年龄而增长；智力与学业成绩有密切关系；智商是相对稳定的；智力受遗传的影响。第二十一张，PPT共六十二页，创作于2022年6月3、估计方法测验内方法测验间方法效标效度实验法或观察法的证实第二十二张，PPT共六十二页，创作于2022年6月 3、估计方法 1）对测验本身的分析测验内方法研究测验内部构造分析测验的结构效度。具体方法内容效度法内部一致性法分析解题的心理过程 第二十三张，PPT共六十二页

7、，创作于2022年6月内容效度法确定取样内容范围后，利用这些资料 定义测验欲测的结构性质韦氏智力测验言语：常识、理解、算术、相似性、词汇、记忆广度操作：译码、填图、积木图案、图片排列、图形拼凑 第二十四张，PPT共六十二页，创作于2022年6月内容范围的描述见到老师、小朋友是否主动打招呼？愿意自己独自玩，还是与其他孩子一起玩？语言较多还是较少，见生人时是否害羞？是否大方？做游戏时，与人交往时，能与人合得来吗？独生子女合群性测验第二十五张，PPT共六十二页，创作于2022年6月卡特尔16PF16个特质，187个题目乐群性，聪慧性，稳定性，持续性，兴奋性， 有恒性，敢为性，敏感性，怀疑性，幻想性，

8、 世故性，忧虑性，实验性，独立性，自律性， 紧张性分测验间关系的分析：特质间相互独立分测验内项目关系的分析：项目相互联系第二十六张，PPT共六十二页，创作于2022年6月内部一致性法目的推断测验是否测量单一特质方法极端组比较法（extreme-group method）二列相关法：求题目与总分的相关分测验与总分的相关第二十七张，PPT共六十二页，创作于2022年6月2）测验间的相互比较测验间方法含义同时考虑几个测验间的关联，考察是否测同一结构。常用方法相容效度区分效度因素效度 第二十八张，PPT共六十二页，创作于2022年6月相容效度concurrent validity含义测相同结构的各种测

9、验间应有较高的相关。求一个新编测验与另一已知结构测验间的相关。第二十九张，PPT共六十二页，创作于2022年6月区分效度含义某一特定测验的分数与已知测量不同结构的测验分数无关。相关高说明新测验的效度有问题。第三十张，PPT共六十二页，创作于2022年6月因素效度含义通过对一组测验进行因素分析，找到影响测验分数的共同因素，每个测验在共同因素上的负荷量即每个测验与共同因素的相关，称作测验的因素效度。基本原理 总变异=共同因素+特殊因素+误差第三十一张，PPT共六十二页，创作于2022年6月（美）霍尔津格（Holzinger）和斯温福德（Swineford）的因素分析取样：芝加哥校区被试：145名7

10、8年级学生内容：实施24个心理测验结果：4个基本因素图-词测验和数-图测验的功能不明显。第三十二张，PPT共六十二页，创作于2022年6月24个心理测验的因素归类词 语速 度推 理记 忆1.一般知识 段落理解2.句子填空3.词汇分类4.词义解释5.加法6.编码7.计数8.点子9.直-曲10.算术 问题11.视知觉 15.数字游戏12.体积 16.问题推理13. 面积 17.系列填空14.打旗 18.演绎推理19.词汇识别20.数字识别21.图形识别22.实物-数23.图词24. 数图第三十三张，PPT共六十二页，创作于2022年6月3）效标效度的研究证明测验效标效标效度资料：提供与结构效度有关

11、的信息。第三十四张，PPT共六十二页，创作于2022年6月4）实验法和观察法的证实考察实验变量对X的影响比较实验处理：前后分数的差异搜集某些变异上的证据。第三十五张，PPT共六十二页，创作于2022年6月（三）效标效度定义效标估计方法criterion-related validity第三十六张，PPT共六十二页，创作于2022年6月 1、定义效标效度是指一个测验对处于特定情境中的个体行为进行估计的有效性。一个测验是否有效，应以实践的效果来作为检验标准。符号：rxy又称统计效度或实证效度。第三十七张，PPT共六十二页，创作于2022年6月 2、效标及其标准 1）定义衡量测验效度的外在标准。它是

12、独立于测验并可以从实践中直接获得我们所感兴趣的行为。做预测所依据的标准。检验效度的参照标准。测验所要测的或要预测的行为特质。第三十八张，PPT共六十二页，创作于2022年6月思考？能够考上大学的学生是否是能力强、素质好、有发展前途的人？我们可以通过他们的哪些方面来衡量？可见，一个测验的效标是不唯一的。具有多样性、复杂性、特殊性和时间性。第三十九张，PPT共六十二页，创作于2022年6月 2）良好效标的选择依据反映测验的目标；较高的信度；可客观地测量；测量方法简单，省时省力，经济实用。第四十张，PPT共六十二页，创作于2022年6月各类测验的可用效标测验类型常 见 效 标成就学年平均分，教师评定

13、结果，学习量，知识应用力，评判知识的批判力，自学能力智力学科成绩，教师评定结果，学生总成绩能力倾向特殊课程或训练成绩，工作或学习成绩职业兴趣从业者的实际成绩或工作表现人格主试主观标准，被试以后行为，临床资料 第四十一张，PPT共六十二页，创作于2022年6月 3 ）效标效度的类型 同时效度含义根据测验分区分已有的状态或预测已知的效标表现来评估测验效度的方法。对同组对象求新编测验得分与现有测验得分（效标值）之间的相关。应用：效标分和新编测验分能同时得到。度量指标：测验分与效标分的相关系数 第四十二张，PPT共六十二页，创作于2022年6月 预测效度定义根据测验分数预测其在效标上将来成绩来考察测验

14、效度的方法。一个测验对被试心理特质或未来绩效所作预测的准确程度。应用：测验分与效标分不能同时得到。 度量指标：测验分与效标分的相关系数 。 第四十三张，PPT共六十二页，创作于2022年6月 3、估计方法相关法区分法命中率功利率第四十四张，PPT共六十二页，创作于2022年6月 ）相关法效度系数测验分（新编）与效标分的相关系数计算方法积差相关法二列相关、点二列相关，多系列相关等第四十五张，PPT共六十二页，创作于2022年6月2）区分法该方法的思路是：被试接受测验后，让他们工作一段时间，再根据工作成绩（效标测量）的好坏分成两组。这时再回过头来分析这两组被试原先接受测验的分数差异，若这两种人的测

15、验分数差异显著，则说明该测验有较高的效度。缺点：组间均数差异显著性取决于团体大小。第四十六张，PPT共六十二页，创作于2022年6月3）命中率含义：正确决策的比例。用途人才选拔方法正确决策的结果 正命中率总命中率 第四十七张，PPT共六十二页，创作于2022年6月表：命中表 效标成绩测验成绩失败（-）成功（+）成功（+）失败（-）总命中率=命中/（命中+失误） =（B+C）/（A+B+C+D）正命中率=成功人数/选择人数 =B/（A+B）当测验用于提高工作效率时考察正命中率；如果强调公平，考察总命中率。A（失误）B（命中）C（命中）D（失误）第四十八张，PPT共六十二页，创作于2022年6月4

16、）功利率使用测验所带来的好处应大大高于使用测验所耗费的时间、精力和经费，还要比较用测验与不用测验的效益之差，若差别不大，则没有使用测验的必要。总之，一个好的测验，根据其测验的目的和性质，往往需要多个效度指标达到相当高的水平。 第四十九张，PPT共六十二页，创作于2022年6月 三、影响效度的因素测验组成测验实施样本团体的性质效标的性质第五十张，PPT共六十二页，创作于2022年6月（一）测验组成试题的质量。测验长度、试题难度和鉴别力及编排方式。增加新试题对信度的影响大于效度。第五十一张，PPT共六十二页，创作于2022年6月测验长度与信度和效度的关系题数 与原测验题数之比 信 度 效 度 10

17、 1 0.300 0.400 20 2 0.462 0.496 30 3 0.562 0.548 60 6 0.720 0.619120 12 0.837 0.688240 24 0.911 0.697480 48 0.954 0.713第五十二张，PPT共六十二页，创作于2022年6月测验长度与效度关系的计算公式： =例：已知 RXX为0.31, RXY为0.42,若把效度系数提高到0.65和0.70,则测验的长度要增加几倍?第五十三张，PPT共六十二页，创作于2022年6月（二）测验实施主试测验情境的控制按测验手册各项规定实施测验。施测过程场地布置材料准备作答方式说明时间的限制等第五十四张

18、，PPT共六十二页，创作于2022年6月被试人格：兴趣、动机、情绪、态度 身心健康状况作答真实性：是否充分合作与尽力第五十五张，PPT共六十二页，创作于2022年6月（三）样本团体的性质异质性越异质，分数分布越广，效度越高；越同质，分数分布越窄，效度越低；第五十六张，PPT共六十二页，创作于2022年6月 2、干涉变量相同测验对不同团体的测量功能不同。干涉变量因性质不同（性别、兴趣、职业、年龄等）使不同团体具有不同的预测能力。第五十七张，PPT共六十二页，创作于2022年6月（四）效标的性质效标本身的性质效标可靠性相同条件下：测量行为与效标行为相似，效度越高。有学者指出，智力测验分数与老师对学生等级评定之间的效度系数只要在0.30-0.50间就可以了,因为老师的评价会受与智力无关的其他因素的影响。第五十八张，PPT共六十二页，创作于2022年6月 提高效度的方法一般来说，可以通过以下方法提高效度：精心编制测验，避免出现较大的系统误差；妥善组织测验，控制随机误差；创设标准的应试环境；选取好正确的效标，定好恰当的效标测量，正确的使用有关公式等方法提高效标关联效度。第五十九张，PPT共六十二页，创作于2022年6月良好的测验必须具备信、效度。rXX是测验可靠性，rXY是欲测内容准确性。测验要有效，首先须提高效度。与信度比，效