第四章 测量信度

第一节信度概述一、信度的定义（reliability）信度是指测量结果的稳定性程度。（测量结果的可靠性程度。可信度。）信度就是测验在测量它所测东西的一致性。或者说，就是同一测验先后测同一对象时所得分数的一致性。信度系数是表示测量结果的稳定性程度的指标。记为：信度系数的值域：[0,1]二、信度的统计定义信度是被试团体真分数方差与实得分数方差之比：信度是被试团体真分数与实得分数相关系数的平方：理论定义操作定义信度是一个测验X（A卷）与它的任意一个平行测验（B卷）的相关系数。两组测验分数之间的相关二、信度的作用信度是测量过程中所存在的随机误差大小的反映（评价测验好坏）标准化学绩或能力测验0.9以上人格测验0.8以上教师自编学绩测验0.6以上信度可以用来解释个人测验分数的意义——测量标准误（用区间估计来表示真分数的范围）理论上：用一个测验对一个人测无数次，实测值的标准差即为标准误造作上：用一组被试两次施测的结果之间的差异来表示，差异的分布为标准误例题某智力测验的信度为0.95，标准差为15，某儿童得分为120分，试估计真分数的范围。SE=3.35120-1.96*3.35120+1.96*3.35信度可以帮助进行不同测验分数的比较（一个人在不同测验上的得分是否有显著差异）不同测验的原始分不能直接比较转换成相同尺度的标准分数（Z分数或T分数）求标准误求Z值？测验分数的比较与平均数差异显著性检验是一回事吗？第二节信度的估计方法信度的估计方法①重测信度：用同一个量表对同一组被试施测两次结果的一致性程度。②复本信度：两个平行测验测量同一批被试所得结果的一致性程度。③分半信度：将一个测验分成对等两半后，所有被试在这两半上所得分数的一致性程度。④同质性信度：指测验内部所有题目间的一致性程度，也叫内部一致性系数。⑤评分者信度一、重测信度含义同一测验同组对象前后测2次相关系数稳定性程序误差时间太短练习效应记忆效应A卷一定时距A卷太长身心变化优点省力、省时测量属性相同提供随时间变化的资料不足适用范围所测心理特质稳定运动技能速度时间间隔长短被试的积极性评价二、复本信度两个平行测验测量同一批被试所得结果的一致性程度。(积差相关)等值性系数测验A1测验B1等值稳定性系数测验A1测验B1

最短时距

合适时距等值性系数含义两等值测验最短时间内对同组对象施测结果r等值性程序误差内容取样A卷最短时距B卷优点代表性增强，信度更准避免练习、记忆效应不足编制复本难影响积极性触类旁通顺序效应评价等值稳定性系数含义两等值测验一定时间内对同组对象施测结果r等值性稳定性程序误差内容取样时间A卷一定时距B卷等值稳定性系数反映题目间的差别、两次实测时的情境、被试特质水平方面的差异。两个测验要具有更高的等值性测验的时距要根据问题性质和测量目的来定经费的问题报告结果时，应报告间隔的时间等值稳定性系数与重测、等值性系数谁得估计更严格，为何？三、内部一致性信度含义测验各题间一致性题目一致性是否测量同一特性分半信度类型内容取样同质性信度（一）分半信度将一个测验分成对等两半后，所有被试在这两半上所得分数的一致性程度。只能测一次或没有副本的情况下使用要把题目分成对等的两半（分半的方法不同，结果不同）公式斯皮尔曼-布朗公式方差相等时弗拉南根公式卢尤公式方差不等时（二）同质信度同质性题目间的内部一致性类型库-理信度克龙巴赫系数0、1题型K-R20难度不同k-R21难度相近各类题型四、评分者信度含义评分者评分的一致性方法2评分者2个以上者rXYrρ肯德尔和谐系数直接解释真分数与实得分数相关的解释rXX间接解释信度系数决定系数∵r2XT=ST²/SX²=rXX∴rXX为各方差的百分比S2X分为各S2E和S2T∵误差源不同信度估计法不同rXX=0.90信度系数和指数例2-13：设有两平等的创造力测验（A和B）。现：1）间隔两月施测100人，其信度为0.70；2）两卷分半信度校正值为0.80；3）第2个评分者随机抽50份，信度0.92；试问：1）真分数的方差是多少？2）各种信度的误差是多少？间接解释范例信度类型rXX重测复本0.70分半信度0.80评分者信度0.92总误差方差真分数方差分析结果误差源时间、内容内容取样评分者差异

两者之差误差的方差时间取样1-0.70=0.31-0.80=0.20.3-0.2=0.10.2+0.1+0.08=0.381-0.38=0.621-0.92=0.08典型测验的信度高低水平测验类型低中高成套成就测验学术能力测验成套倾向性测验客观人格测验兴趣问卷态度量表.66.92.98.56.90.97.26.88.96.46.85.97.42.84.93.47.79.98各种信度反映的误差来源比较信度类型误差来源重测信度等值性系数等值稳定性系数分半信度同质性信度评分者信度时间内容时间和内容内容内容评分者之间的差异注意问题以上方法仅适用于常模参照测验目标参照测验要以概化理论为基础进行处理以上方法仅适用于难度测验速度测验的信度问题目标参照测验的信度前期目标预测测验和后期目标检测测验的比较（第二次达标的人在第一次测试中达标的比例）一致性百分比法（两次测验合格人数+两次测验不合格人数）/测验总人数

第三节提高测验信度的方法一、影响测量信度的因素影响测量信度的因素施测间隔的时间被试主试施测环境测量工具被试方面身心状况、应试动机、作答态度等样本团体异质性的影响样本团体平均能力水平的影响特点样本越异质，分数分布越广，S↑，r↑，测验越可靠样本团体异质性的影响分析散点图计算散点图整段范围低高样本团体平均能力水平的影响团体平均水平太高或太低，使测验分数的分布变窄，低估测量的信度选择测验时应注意取样团体的变异性和能力水平建立信度的团体与欲测团体是否一致测量工具试题取样（题目太少，考察的不全面）试题之间的同质性程度试题难度智力的时间变化间隔期信度系数同日或次日0.90～0.951年0.852～2.5年0.805年