第六章经典测验理论-效度

第六章经典测验理论——效度一、什么是效度？rxy=Sv2/Sx2从公式看效度也是一个理想的概念实际中我们是通过寻求测验工具之外的一些证据间接来证明或检验一个测验的有效性第六章经典测验理论——效度一、什么是效度？1、效度是个相对概念一种测量工具的效度只是对一定得测量目的有效有效也是一定程度上到相对有效2、效度是测量的随机误差和系统误差的综合反映3、判断一个测量是否有效要从多方面来收集证据第六章经典测验理论——效度二、效度的类型内容效度（contentvalidity）与内容相关的证据构想效度（constructvalidity）/结构效度结构相关的证据效标效度（criterion-relatedvalidity）效标相关的证据

3种效度分类不是泾渭分明，而是在许多方面互相重叠的，互相联系，互相支持的。第六章经典测验理论——效度二、效度的类型1、内容效度内容效度指一个测验实际测到的内容与所要测量的内容之间的一致程度。实际上是说题目取样的代表性问题。第六章经典测验理论——效度二、效度的类型判断内容效度的方法：a.专家评判法：请有关专家对测验题目与原定内容的吻合程度作出判断。看题目是否代表了规定的内容。由于这种方法主要依据专家权威门头脑中的逻辑分析和思考，所以内容效度有时也叫逻辑效度。这是一种定性的方法。第六章经典测验理论——效度二、效度的类型b.经验法：即通过实践来检验效度。比如智力，高年级比低年级的水平要高，这是大家的经验，如果测验分数也是随着年纪的升高而增加，那么，你这就和大家的实践经验一致，我们就说测验是有内容效度的第六章经典测验理论——效度二、效度的类型c、复本信度（定量法）克伦巴赫用两个取自同样内容范围的各自独立的测验的得分的相关系数（复本信度）来作为内容效度的数量化指标，如果相关高，证明他们具有内容效度，若相关低，则至少有一份测验缺乏内容效度，这是用统计学方法来确定测验内容效度的一种尝试第六章经典测验理论——效度二、效度的类型编制任何测验都要考虑内容效度，这样可以先从测验内容上最小化误差对测量结果的影响内容效度主要应用于学绩测验和成就测验，他们主要测量被试掌握某种技能或学习某门课程所达到的程度内容效度也适合某些用于选拔和分类的职业测验。这种测验主要考察实际工作需要的知识和技能。第六章经典测验理论——效度二、效度的类型表面效度（surfacevalidity）被试主观上觉得测验有效的程度内容效度是说内行专家对测验题目的判断实际上，表面效度不能被认为是严格的效度概念。但是，我们在编制量表、评价量表时要考虑到这个内容。因为表面效度会涉及到被试者的动机，进而影响到测量效果。第六章经典测验理论——效度二、效度的类型最佳行为测验（能力和成就测验），最好能让被试意识到题目在测验什么心理内容，否则被试动机不强。典型行为测验（如人格、态度测验），最好不让被试意识到量表项目具体测验什么，这样才可能测到真实的反应。第六章经典测验理论——效度二、效度的类型2、效标效度/实证效度效标效度反映的是测验预测个体在某种情境下行为表现的有效性程度。因为效标效度需要有实际的证据，所以也叫实证效度效标：衡量一个测验是否有效的外在标准。通常是我们要预测的行为表现。测验就被称为预测源效度系数：测验分数和效标分数的相关系数第六章经典测验理论——效度二、效度的类型根据效标资料搜集的时间不同

a.预测效度（predictivevalidity），其效标资料须在测验之后根据将来实际成绩来确定。需要经过一段时间才能搜集到效标资料。主要是在人员的选拔和安置工作时，常用的是训练成绩和实际工作中的表现

b.同时效度（concurrentvalidity），效标资料与测验分数可同时收集。学习成绩、教师评定、临床检查等第六章经典测验理论——效度二、效度的类型什么是好的效标？（四个条件）

a、有效性，效标必须是有效的标准

b、可靠性，效标要具有相对稳定性

c、客观性，当效标是主观标准时，要注意效标污染所谓效标污染就是被试的效标成绩由于评定者知道其测验成绩而受到影响

d、实用性，一个好的效标应该是经济、省时、省事我们实际中经常使用的效标有：实际的工作成就、学习成绩、临床表现、主观的等级评定和其他有效测验的成绩第六章经典测验理论——效度二、效度的类型效标效度可用方法估计：a.相关法：计算测验分数（预测源分数）与效标测量分数的相关系数。b.区分法：被试接受测验后，过一段时间，再根据效标测量分数的高低将被试分为两组，返过来比较两组被试原先测验分数（预测源分数）的差异，如果两组被试预测源分数的差异显著，说明该测验有较高效度c.命中率第六章经典测验理论——效度二、效度的类型3、构想效度/结构效度构想效度指测验能够测量到理论上的构想或特质的程度。（一）、确定构想效度的基本步骤确定构想效度的基本步骤是，首先从某一理论出发或者提出关于某一心理特质的假设，然后设计和编制测验并进行施测，最后对测验的结果采用相关或因素分析等方法进行分析，验证测验结果与理论假设的相符程度，即测验在多大程度上正确地验证了编制测验的理论构想。

第六章经典测验理论——效度二、效度的类型构想效度的确定方法分为测验内方法和测验间方法1、测验内方法测验内法这类方法主要是通过研究测验内部结构，如测验的内容以及题目间的关系等来分析测验的构想效度。

第六章经典测验理论——效度二、效度的类型a、内部一致性：测验的内部一致性可以为我们提供测验内部结构有效的证据。就是说，可以判断测验究竟测量的是不是同一特质。对内部一致性进行估计的指标主要有克龙巴赫α系数、分半相关、项目与总分相关、分测验与总分相关、项目间相关等等第六章经典测验理论——效度二、效度的类型b、分测验之间的相关当一个构念由两个或两个以上的分测验来测量时，分测验分别代表着该构念的一个维度或一个组成部分，这就要求分测验之间相关不能太高，以保证各自的相对独立性；同时，因为分测验都是对同一构念的测量，所以分测验之间的相关又不能过低第六章经典测验理论——效度二、效度的类型2．测验间法通过对几个测验的比较研究，找出它们所测的共同特质，这样便可确定这些测验是否具有构想效度。第六章经典测验理论——效度二、效度的类型c.相容效度（congruentvalidity）：求一个新测验与一已有测验的相关（若无已有测验，用部分有关系的测验代替）

比如，我们编制了一个人格量表，经检验，和已有的能有效测量人格的量表（如16pf）有高度的正相关，说明我们的量表也可以测量人格，有较高的效度。第六章经典测验理论——效度二、效度的类型d.会聚效度和区分效度会聚效度又称为求同效度，基本思想是，如果两个测验测得是同一种特质，即使使用不同的方法进行测量，他们之间的相关也应该很高，区分效度也称为求异效度，其基本思想是，如果两个测验测量的是不同特质，即使用同样的方法进行测量，他们之间的相关也很低。第六章经典测验理论——效度二、效度的类型e.因素效度：建立构想效度最为常用的方法，通过对一测验的项目进行因素分析，找到影响测验分数的共同因素，每个项目在共同因素上的负荷量（即每个项目与共同因素的相关），称做测验的因素效度

第六章经典测验理论——效度二、效度的类型构想效度促使研究者把着眼点放在提出假设、检验假设上，使得测验成为理论研究的重要工具，而不再只是实际决策的辅助工具，从而使测验有了更广阔的发展前景。构想效度的主要缺点是，有些构想概念模糊，没有一致的定义，确定效度时没有明确的操作步骤。第六章经典测验理论——效度三、信度和效度的关系高信度是高效度得必要条件，但不是充分条件，低信度一定低效度，信度高不一定效度高，高信度可能有高效度，也可能低信度，反之，高效度是高信度得充分条件，高效度一定会有高信度效度不会大于信度的平方根，如信度，效度最大第六章经典测验理论——效度四、影响效度的因素

严格的说，凡是与测量目的无关的因素都会影响测量的效度，一切产生误差的环节都可能影响到效度：1、测验工具/测验本身2、测验实施过程3、被试的状态4、效标的好坏5、信度的影响第六章经典测验理论——效度五、提高效度的方法1、控制系统误差系统误差是影响测验效度的主要因素。仪器不准题目和指导语有暗示性答案按排不当(被试可以猜测)第六章经典测验理论——效度五、提高效度的方法2、精心编制测题和测验量表:首先测题内容要适合测验目的其次，测题要清楚明了，用语要让被试理解，排列由易到难。第三，测题的难度和区分度要合适。

第六章经典测验理论——效度五、提高效度的方法3、严格按照测验程序进行测量，防止测量误差例如：要严格按照测验手册