心理测量学（项目分析）ppt课件

第四步 试测与项目分析 *心理测量学 郭志峰 1 试测 v试测 v注意事项： 试测对象 情境 时限（中间叫停、换笔） 记录 第五件事：你们也要试测一下。 Date 2 项目分析 v质的分析：内容取样、题目的思想性、表达是 否清楚 v量的分析：难度、区分度、备选项分析 第六件事：质的分析（由在座的诸位心理学专 家讨论、评价） Date 3 重点难点来了！ *心理测量学 郭志峰 4 难 度 v难度（difficulty） 指项目的难易程度。 v在最高作为测验中，称为“难度”，而在典型作 为测验中，则指“通俗性”。两者都是指在总体 中，能够正确或确切回答某项目的人数。 Date 5 难度公式（通过率） 1、二值计分 公式1： (R为答对该题的人数，N为总人数） 公式2：极端分组法（上下27%） Date 6 为什么用27%？ v经验：27%规则 v一般情况下，取上下25%33%均可。 v样本少时，可以取50% v注意： 由于计算机的方便使用，可以上下50% 作为划分高低组的标准，或者多分几组，对区 分度和难度作详细分析。因为只取上下两端， 只利用了一部分资料，浪费了很多信息，有可 能得出错误结论。 Date 7 难度公式（通过率） 公式3： CP为校正后的通过率，P为实 得通过率，K为备选答案数目。 Date 8 难度公式（通过率） 2.非二值计分 （ 为全体被试该题目的平均分， 为答对该题应得分数） Date 9 测验难度水平的确定 v大体而言，难度为0.50时最理想，因为它使总 体的变异最大，此时项目具有最大的鉴别力。 但在实际操作中，让所有项目难度都到达0.50 困难很大，而且也不必要，一般只需使项目的 平均难度接近0.50，而各个项目的难度在 0.50 0.20之间变化。 v当题目之间正相关时，题目难度值应分布的广 些但平均难度应以0.50为好。 v对于选择题来说，难度一般应大于猜测概率； 当题目有猜测可能时，题目的 P 值应适当加大 。 Date 10 测验难度水平的确定 v效标参照测验、掌握测验：不考虑难度； P=1.0或P=0有可能也是好题 v 选拔测验：难度=录取率； v 无论是速度测验，还是难度测验，一般都应 防止被试得满分，因为满分的意义是不明确的 。 v人格测验P0.95或P0.05的题目考虑删除 Date 11 美国教育服务中心的做法 v美国教育服务中心以作为难度指标： =13+4Z P = .0013 Z = +3 = 25 P = .16 Z = +1 = 17 P = .50 Z = 0 = 13 P = .84 Z = -1 = 9 P = .9987 Z = -3 = 1 Date 12 区 分 度 v区分度（discrimination）是指测验项目对被 试心理品质水平差异的区分能力或鉴别能力。 v项目的区分度是测验是否有效的“指示器”。 Date 13 区分度的计算 1.鉴别指数法 鉴别指数（index of discrimination，D） 取值范围：-1 +1 Date 14 区分度的计算 1965年，美国测验专家伊贝尔根据经验提出 的标准： 鉴别指数题目评价 0.40以上很好 0.300.39良好，修改会更好 0.200.29尚可，仍需修改 0.19以下差，必须淘汰 Date 15 区分度的计算 2.相关法 以某一项目分数与效标分数或测验总 分的相关，作为区分度指标。 （1）二列相关 适用于两个 连续变量，其 中一个被人为 分成两类。如 语文分与总考 分（录取线上 下） t为全部变量；y为p与q交界处正态曲线高度。 Date 16 区分度的计算 v注意： 要求二分变量的分布是正态。 要求连续变量分布是单峰对称 Date 17 区分度的计算 （2）皮尔逊积差相关 适用于两个连续变量。如 语文科分数与总考分（不划分 ） Date 18 区分度的计算 （3）点二列相关 适用于一个为连续变量， 一个为二分变量。如一个是非 题的分数与总分。 Date 19 例题 学 生 ABCDEFGHIJKLMNO 总 分 6570314980503510816978 55779042 对 错 010110100110110 Date 20 相关的显著性检验：Z大于1.96为显著相关 Date 21 项目特征曲线 vitem characteristic curve, ICC v项目特征曲线描述了效标分数不同的被试在该 项目上的通过率。 v曲线坡度越陡，鉴别力越好，预测的误差越小 。 1.00 0.50 低 中 高 能力 鉴 别 力 较 好 正 确 回 答 项 目 的 概 率 Date 22 低 中 高 能力 率 概 的 目 项 答 回 确 正 1.00 0.00 0.50 低 中 高 能力 率 概 的 目 项 答 回 确 正 1.00 0.00 0.50 鉴 别 力 为 负 鉴 别 力 较 低 Date 23 率 概 的 目 项 答 回 确 正 1.00 0.00 0.50 低 中 高 能力 A B C 难度不同的3个项目的ICC Date 24 多项选择中每个选项的ICC 率 概 的 目 项 答 回 确 正 1.00 0.00 0.50 低 中 高 能力 A B C D Date 25 难度（）区分度（） 1.000 0.900.20 0.800.40 0.700.60 0.600.80 0.501 0.400.80 0.300.60 0.200.40 0.100.20 0.000 区分度与难难度的关系 难度和区分度 都是针对一定 团体而言的。 一般来说，较 难的项目对高 水平被试区分 度高，较易的 项目对低水平 被试的区分度 高。 Date 26 项项目分析的特殊问题问题 v多重选择题 的项目分析（诱答分析） 对于多重选择题 ，除了分析难度和区分 度外，还要对每个选项进 行分析。 下列哪一个最有可能是偏执型精神分裂症 患者的次级症状： A 幻听 B 瘫痪 C 记忆丧 失 D 厌食 Date 27 项项目分析的特殊问题问题 v 如果所有被试都选择某一正确的选项，说明该选项 v 如果没有一个被试选择 某个错误选项 ，说明该选项 v 如果所有被试都选择某个错误选项 ，说明该选项 v 如果高分组被试的选择集中在两个选项上，说明该 选项 v 如果高分组和低分组对正确选项的选择没有区别， 说明该选项 v 如果所有被试都未回答某个题目，说明该题 v 如果选择各个选项的人数几乎相等，说明该题 Date 28 项项目分析的特殊问题问题 v速度测验的项目分析 对前面部分的测验项 目，难度和区分度都 对后面部分的测验项 目，难度和区分度都 v标准参照测验的项目分析 在标准参照测验中，无须考虑项目的难度和区 分度，只要项目的内容很重要就行。 也可以通过比较教学或训练的前测和后测结果 来进行项目分析，用来说明教学或训练的效果 以及项目编制是否适当。 Date 29 项项目分析的特殊问题问题 v项目-团体的相互作用 具有不同性质（性别、种族、职业等）的团 体，在测验得分上也存在差异，即同样的项 目可能有不同的难度。 如果测验要求对所有个体都相对“公平”，那 么，就应该排除那些有利于或不利于不同性 质的亚团体的项目； 如果测验的目的就是为了考察不同亚团体 的差异，那么，就应选择使团体差异尽可能 大的题目。 Date 30 项项目分析的特殊问题问题 v有效性与可靠性的矛盾 同质性信度要求项目之间有高相关，各项目的 难度均等； 对于预测 效度来说，因为效标的变异范围较 大，如果项目越同质，那么效标关联效度则低 ；因此，效标关联效度要求各项目之间要有一 定的差异，即项目之间相关低，这样 才能保证 测验 得分与效标之间有高相关，即高的效标关 联效度。 因此，对于多数心理测验 来说，项目之间中等 程度的相关，可使二者调和，获得较为满 意的 （同质性）信度和（效标关联）效度。 Date 31 第五步：合成测验测验 v项目选择 要选择那些能够测量所要测量的东西的项 目； 难度 区分度 v编排 并列直进式 混合