西南上课心理测量学课件效度

1、效度：决策的应用Validity for Decisions实证效度效标实证效度的确定实证效度的运用1.1实证效度 一个测验对处于特定情境中的个体行为进行估计的有效性。实证效度又称效标关联效度（criterion-related validity）定义测验分数用于预测的正确性测验得分与决策结果（效标）之间的关系强度1.2Criterion-related validity两种：concurrent & predictive同时效度：测验分数与效标资料同时收集 test scores - criterion psycho diagnostic test - psychiatric diagnos

2、is 1.3预测效度（predictive validation ）先获得测验分数，隔一段时间后，再收集效标资料 test scores- criterion (months ) (years ) entrance exam-college grades1.4效度系数的解读r：与效标的关系很难达到较高水平.60 R2 (Multiple Correlation )：是效标变量和多个最佳预测因子的相关；即效标方差由测验所决定的部分 Y=b1X1 + b2X2 + + azY=B1z1 + B2z2 + .2 效标与效标测量效标（criterion）就是衡量一个测验是否有效的外在标准，简称效标。E

3、x: Interest tests criterion satisfaction success观念效标：理论定义，如“大学的成功”效标测量：操作定义，如大学成绩2.1效标的特性多样性复杂性 特殊性时间性 2.2Characteristic of a Good Criterion明确性有效性可靠性实用性客观性2.3效标污染Criterion Contamination from test ex. 生活质量（1） 生活压力事件（2） 标准（+2）与测验（1）一致from experts rating Knowledge of test scores rating on criterion2.4常

4、用的效标学业成就临床诊断实际工作表现特殊训练成绩不同团体的总体表现先前有效的测验等级评定3.1 确定效标关联效度的步骤1.选择恰当的效标及其测量方法2. 确定恰当的被试样本3. 实测测验并计分4. 搜集效标数据5. 确定测验分数和效标之间的相关rxy3.2实证效度的确定方法）相关法测验分数与效标测量之间的相关系数。）区分法测验工作效标测量（工作成绩）按工作成绩分高低两组，如工作成绩高低，测验得分高低一致，说明该测验有效度工 作表 现测验成绩合格不合格合格AC不合格BD总命中率=（A+D）/（A+B+C+D）正命中率= A/（A+C）命中率3.2实证效度的确定方法）功利率使用测验所需费用和所得收

5、益进行比较，是否利大于弊4 效度的应用-回归预测regression equation Y : job success 7 - point scale supervisor X : employment T 0 - 100 Y= 0.07X+0.2 ex. X=55 X=33 Y=0.07(55)+0.2 Y=0.07(33)+0.2 Y=4.05 Y=2.51 高中英语与大学入学考试的平均分为92.59和64.18，标准差分别是21.01和11.03，两次考试之间的相关为0.86。如果某生高中成绩为114分，那么入学考试可能得多少？4.2 决策理论与效度的应用Decision theory分

6、析决策效果的数量化方法，用于选拔、诊断术语击中（Hit）虚报（False Positive）漏报（False Negative ）Percentage of Hits, False Positives and Negatives Affected by:受以下因素影响：test validity 基础率（Base rate，BR）: 50% 录取率（Selection ratio，SR)划界分 e.g., if 4 people apply for 1 position, SR = 1/4 = .25if 4 people apply for 4 positions, SR = 4/4 = 1

7、11251211252412633213524114692152231211测 验 分 数工 作 成 绩2238733效度？P(FP) = SR P(TP) P(FN) = BR P(TP) P(TN) = 1 P(TP) P(FP) P(FN) P (TP) = BR x SRBR = .5 SR = .5, 25% of the decisions made at random will be TPs validity=0 .4 P (TP) = .35; P (FP) = .15; P (FN) = .15; P (TN) = .35. 70% decision will be corr

8、ect. Taylor Russell, 1939Example: hire 40/100 people (SR = .40) on the basis of a test with a validity of .70 for a job with a BR of 50%Example: SR = .40 with a validity of .70 BR of 50%Contrast: Test validity = .20 (SR = 40/100; BR of 50%)Construct and predictionPredictorConstructCognitive abilityCriterion Const