项目分析课件_第1页
项目分析课件_第2页
项目分析课件_第3页
项目分析课件_第4页
项目分析课件_第5页
已阅读5页,还剩175页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

心理测量学Mentalmeasurement

精神卫生学院

曹运华第六章项目分析

Itemanalysis心理测量学精神卫生学院第六章项目分析

Item1我们本章要解决的问题:5个1.什么是项目分析及意义2.什么是难度及难度的计算?3.难度的矫正公式?4.什么是项目的区分度及区分度的计算方法?5.测验的项目分析实例我们本章要解决的问题:5个1.什么是项目分析及意义2本章前提:本章前提:3怎样从校区到龙沙公园?怎样从校区到龙沙公园?4怎样从校区到龙沙公园?1.大家知道两者的距离大约是?2.那方法和工具都有哪些啊?3.如果咱们把距离拉远,从齐市到哈市的方法都有哪些啊?4.各方法的效率是一样的吗?怎样从校区到龙沙公园?1.大家知道两者的距离大约是?5小结论:1.要想高效、经济地达到目的,选择一个合适的、良好的工具是必要的条件。2.测量也是如此,要想完成测量目的,必须选择一个质量良好的测量工具,对心理测量来说,就是选择一个良好的测验。3.那么如何才能确定一个测验质量是良好的?小结论:1.要想高效、经济地达到目的,选择一个合适的、良好的6一.如何对测验进行分析和鉴定?(一)测验进行鉴定Testanalysis(二)题目进行鉴定Itemanalysis鉴定测验的方法一.如何对测验进行分析和鉴定?(一)测验进行鉴定(二)题目进7(一)如何对整个测验进行鉴定?整个测验定性分析统计量分析信度值效度值(一)如何对整个测验进行鉴定?整个测验定性分析统计量分析信度8(二)组成测验的题目进行鉴定项目分析定性分析定量分析难度值区分度(二)组成测验的题目进行鉴定项定性分析定量分析难度值区分度9总结:好的题目好的测验有效完成测量目的总结:好的题目好的测验有效10二.项目分析的意义:5个1.可以为筛选和修改测题提供依据。2.有助于提高测验的信度和效度。3.有助于标准化题库的建设。4.有助于测验结果的合理解释。5.有助于测验编制技能和技巧的提高。二.项目分析的意义:5个1.可以为筛选和修改测题提供依据。11第一节测验的难度

Testdifficulty第一节测验的难度

Testdiff12一、难度的意义难度(difficulty):是指测验项目(题目)的难易程度。想一想:1、在期末考试时数学老师出了一套考试试卷,全班30人中26人考了95分以上,这个试卷的题目难吗?2、要是30人中26人考了50分以下,这个测验难吗?一、难度的意义难度(difficulty):是指测验项目(题13二、难度的计算:公式1(一)二分法记分的项目计算P:难度R:答对该题的人数N:全体被试人数二、难度的计算:公式1(一)二分法记分的项目计算P:难度14阅读:什么是二分法计分?二分法计分:即一题目的得分只有0分、满分两种可能,也就是说被试答对该题得满分,答错了得0分。大家想一下,它的适用题型有哪些:1、选择题;2、填空题;3、判断题等。阅读:什么是二分法计分?二分法计分:即一题目的得分只有0分、15例题及分析:例题1:设有80名被试参加某一个测验,答对其中某题的有32人,问该题的难度指数是多少?想一想:1、P值的范围?2、P值与测题难度的关系?例题及分析:例题1:设有80名被试参加某一个测验,答对其中某16分析与结论:P与难度1、P值的范围:[0,1]2、P值越大,难度越小;P值越小,难度越大。3、其中P=0和P=1是极端难度。分析与结论:P与难度1、P值的范围:[0,1]17『想一想』:此公式适用条件1.用公式1计算一个测题的难度,需要知道哪些条件(数据)?2.要是被试人数较多(N>100),用这个公式计算测题难度系数就会出现什么情况?『想一想』:此公式适用条件1.用公式1计算一个测题的难度,需18计算:公式2P:难度Ph:高分组的通过率Pl:低分组的通过率计算:公式2P:难度Ph:高分组的通过率19阅读:高分组和低分组怎么划分?在人数较多的时候,不宜采用公式1进行运算,这是可用极端分组法进行计算。分组的步骤如下:1、先把所有被试的总分按从高到低排列2、从最高分开始向下取27%的被试作为高分组;3、从最低分开始向上取27%的被试为低分组。阅读:高分组和低分组怎么划分?在人数较多的时候,不宜采用公式20相关例题分析1:书上例题:P73在370名被试中,高分组有70人答对第一题,低分组有40人答对第一题,那么该题的难度是多大?该怎样解答该题啊?相关例题分析1:书上例题:P7321相关例题分析2:2000年华东师范大学考试题(3分):一个测验高分组有80%的被试通过,低分组12%的被试通过,那么该题的难度是多少?相关例题分析2:2000年华东师范大学考试题(3分):22计算:公式3(二)非二分计分项目的难度计算:P:难度X:被试的平均得分X:该题的满分值计算:公式3(二)非二分计分项目的难度计算:P:难度X:23阅读:什么是非二分计分?非二份计分:是指被试在一个题目上的得分有从0分到满分的多种可能。大家想一下,和二分法计分相比,非二分法计分适用题型有哪些:1、简答题;2、论述题;3、作文题等阅读:什么是非二分计分?非二份计分:是指被试在一个题目上的得24例题分析1:书上例题2:P74数学测验的第七题的满分是15分,在该题上考生的平均得分是9.6分,则该题的难度是多少?例题分析1:书上例题2:P7425相关例题分析2:例题2:一测验的第3题的满分是15分,在该题上高分组考生的平均得分是9.6分,低分组考生的平均得分是3.6分,则该题的难度指数是多少?相关例题分析2:例题2:26三、难度的矫正公式在选择题和判断题上,有一个重要的问题是:测验得分是被试能力的反应还是因为猜测而获得的成功。比如:考试时有选择题不会,你会怎么办?这样大量的猜测会对被试在选择题和判断题的分数产生影响。三、难度的矫正公式在选择题和判断题上,有一个重要的问题是:测27『想一想』猜测误差的种类在客观性测题(选择、是非等)中,不可避免的存在着猜测误差。那么,想一下猜测误差的种类有哪些?这样大量的猜测会对选择题和判断题的分数产生影响,这时就需要进行矫正。『想一想』猜测误差的种类在客观性测题(选择、是非等)中,不可28(一)难度的矫正公式:CP:矫正后的难度P:未矫正前的难度K:备选答案的数量。(一)难度的矫正公式:CP:矫正后的难度P:未矫正前的29相关例题分析:2002年华东师范大学考试题(4分):某一个测验中,一个五选一的测题的难度值是0.61,另外一个四选一的测题难度是0.64,请问这两个测题的哪个题难度较大?该怎样才能正确解答?相关例题分析:2002年华东师范大学考试题(4分):30(二)猜测校正的基本假设:校正公式的基本假设是:被试不知道正确答案时,完全凭猜测作答,猜测的成功与否完全由随机因素所致,即被试选择某一个备选答案是随机决定的。小问题:大家同意这个假设吗?同意,为什么?不同意,为什么?(二)猜测校正的基本假设:校正公式的基本假设是:被试不知道正31(三)赞成使用的观点:2个1.校正后的得分可以反应被试得分的真正水平和能力。2.在教育测验中,可以培养学生诚实的美德。(三)赞成使用的观点:2个1.校正后的得分可以反应被试得分的32(四)反对使用的观点:3个1.校正公式并不是对难度系数的真正校正。2.公式的基本假设不成立。3.在实际生活中,经常缺乏充分的证据和资料,这时进行合理地猜测是值得培养的能力。(四)反对使用的观点:3个1.校正公式并不是对难度系数的真正33四、难度对相对性一测题的难度并不是固定不变的,它为因情况不同而有所变化。也就是说,难度是相对的。影响难度性对性的因素:1、团体的平均水平;2、测验的编制技术。四、难度对相对性一测题的难度并不是固定不变的,它为因情况不同34五、难度对测验的影响1.难度影响测验分数的分布形态及范围2.影响测验分数的离散程度3.影响测验项目的鉴别能力五、难度对测验的影响1.难度影响测验分数的分布形态及范围35分数分布形态:正偏态分数分布形态:正偏态36『想一想』正偏与难度关系?1.大家想一想,测验分数分布是正偏态分布,说明了什么情况?2.大部分被试的得分是比较高还是比较低?3.分数正偏态分布是说明测验较难还是相对比较容易?『想一想』正偏与难度关系?1.大家想一想,测验分数分布是正偏37分数分布形态:负偏态分数分布形态:负偏态38『想一想』负偏与难度关系?1.大家想一想,测验分数分布是负偏态分布,说明了什么情况?2.大部分被试的得分是比较高还是比较低?3.分数负偏态分布是说明测验较难还是相对比较容易?『想一想』负偏与难度关系?1.大家想一想,测验分数分布是负偏39相关例题分析:1997年北京师范大学实验心理学(含心理测量)试题。简答题(5分)2、记忆实验中出现很多被试的记忆量达到了100%的现象,说明此实验处理存在什么问题,应如何改进?相关例题分析:1997年北京师范大学实验心理学(含心理测量)40正偏与负偏及处理方法:1.正偏态分布:即大多数集中在低分端,说明测验对被试来说偏难,因此必须增加足够数量的较容易的项目。2.负偏态分布:即大多数被试的得分集中在高分端,说明题目偏易,应该增加一些较高难度的项目。正偏与负偏及处理方法:1.正偏态分布:即大多数集中在低分端,41分数分布形态:正态分数分布形态:正态42六、难度水平的确定项目的难度水平多高合适,取决于测验的目的以及测验的性质。1.当测验为教育测验和总结性测验时,可以不过多考虑难度,只要教育者认为重要的内容就可选用。2.当测验目的是选拔录用人员时,难度视录取率而定。3.一般性测验中的难度应怎么样?六、难度水平的确定项目的难度水平多高合适,取决于测验的目的以43七、难度的等距转换1.以项目的通过率P来表示一个项目的难度,计算方便,便于理解。2.它是属于何种测量水平?3.这样的难度系数是否存在什么问题?七、难度的等距转换1.以项目的通过率P来表示一个项目的难度,44相关例题分析:现已知某一个测验的第一题的难度P为0.027,第二题的难度P为0.50,第三题难度P为0.84,请问,这三道题中:1、难度最大的是哪道题?2、第一题比第二题难多少?3、第二题比第三题难多少?相关例题分析:现已知某一个测验的第一题的难度P为0.027,45总结:难度的等距转换顺序等距总结:难度的等距转换顺序等距46(一)难度等距转换步骤:5步法1.计算项目的通过率P;2.把P转换为从右至左而行的正态曲线下的面积;3.查Z表,看对应面积的Z值;4.按Z′=13+4Z转换;5.比较Z′值。(一)难度等距转换步骤:5步法1.计算项目的通过率P;47补充知识:正态曲线下的面积补充知识:正态曲线下的面积48面积转换示意图:面积转换示意图:49(二)相关例题分析1:现已知某一个测验的第一题的难度P为0.027,第二题的难度P为0.50,第三题难度P为0.84,请问,这三道题中:1、难度最大的是哪道题?2、第一题比第二题难多少?3、第二题比第三题难多少?(二)相关例题分析1:现已知某一个测验的第一题的难度P为0.50(二)相关例题分析2:现已知有80人参加某一个测验,其中答对第一题的人数是32人,答对第二题的人数是48人。请问:1、这两道题的难度差距是多少?(二)相关例题分析2:现已知有80人参加某一个测验,其中答对51第二节测验的区分度

Testdiscrimination第二节测验的区分度

Testdiscrimin52一、区分度的意义:项目的效度(一)区分度(discrimination):又称鉴别力,是指测验项目对被试心理品质水平差异的区分能力或鉴别能力。(二)区分度的重要性:(1)测验有效的“指示器”;(2)评价测题质量,筛选测题的主要指标,又被称为“项目的效度”。一、区分度的意义:项目的效度(一)区分度(discrimin53具有良好区分度的项目,应该将不同水平的被试区分开来。中得分高高水平被试低中等得分低具有良好区分度的项目,应该将不同水平的被试区分开来。中得分高54二、区分度的计算:2类区分度计算方法:(一)鉴别指数法(二)相关法二、区分度的计算:2类区分(一)鉴别指数法(二)相关法55二、区分度的计算(一)鉴别指数法discriminationindex高分组和低分组通过率的差别,来计算区分度。情景:常用、易用(二)相关法interrelated

method单一项目分数与效标分数或测验总分的相关可作为区分度的指标。适用情景:大规模测验或标准化测验。二、区分度的计算(一)鉴别指数法discriminatio56(一)鉴别指数法1.鉴别指数(D指数):高分组与低分组的通过率之差。计算公式:D=PH–PL大家想一想,根据计算公式:(1)D的取值范围是多少?(2)D值与项目质量的关系?(一)鉴别指数法1.鉴别指数(D指数):高分组与低分组的通过57例题:1999年华东师大考研计算题:一个测验的测题全部是由五选一的选择题组成的,其中第一题上端27%的被试P=0.75,下端27%的被试P=0.35,请问它的鉴别力多大?例题:1999年华东师大考研计算题:58D的判定:D值范围测题的质量评价D>0有效区分保留D=0无区分D<0消极区分舍弃D的判定:D值范围测题的质量评价D>0有效区分保留D=0无区592.伊贝尔鉴别指数标准:鉴别指数D题目质量评价0.40以上很好0.30-0.39良好,修改会更好0.20-0.29尚可,仍修修改0.19以下差,需淘汰2.伊贝尔鉴别指数标准:鉴别指数D题目质量评价0.40以上很60例题:1999年华东师大考研:计算题:一个测验的测题全部是由五选一的选择题组成的,其中第一题上端27%的被试P=0.75,下端27%的被试P=0.35,它的鉴别力多大,该题可以接受吗该怎样作答?例题:1999年华东师大考研:计算题:613.项目特征曲线:通过率1.000.000.50低中高能力ABCD3.项目特征曲线:通过率1.000.000.50低62项目特征曲线分析:题号质量评价态度1??2??3??4??项目特征曲线分析:题号质量评价态度1??2??3??4??63项目特征曲线分析:题号质量评价态度1有效区分保留2无区分舍弃3低区分舍弃?最好修改4无效区分舍弃项目特征曲线分析:题号质量评价态度1有效区分保留2无区分舍弃64(二)相关法interrelated

method假设:特质水平测验总分数项目分数(二)相关法interrelatedmethod假设:651.点二列相关条件:项目是二分记分,效标或总分是连续变量。1.点二列相关66相关例题分析:15名被试效标分数和一题目得分序号123456789效标657031498050351681题分010110100相关例题分析:15名被试效标分数和一题目得分序号123456672、二列相关适用条件:两个都是连续变量,但其中一个变量被人为分成两类。2、二列相关683、φ相关适用条件:两个变量都是二分类型的变量3、φ相关694、积差相关适用条件:两个变量均是连续变量。4、积差相关70三、区分度与难度的关系难度区分度三、区分度与难度的关系难度区分度71区分度与难度的关系:1、极端难度:区分度低2、中等难度:区分度最大3、大家想一下,想提高测验的区分度,根据难度和区分的关系,一个可行的方法是什么?办法:难度正态分布,并把大部分测题的难度保持在中等难度区分度与难度的关系:1、极端难度:区分度低72四、区分度的相对性1.计算方法不同,区分值也不同;2.用相关法计算受样本容量大小的影响;3.用鉴别指数计算受分组标准的影响;4.受被试团体异质性的影响;5.受题目难度的影响.四、区分度的相对性1.计算方法不同,区分值也不同;73五、项目分析报告

Itemanalysisreport如何做项目分析报告?五、项目分析报告

Itemanalysis74(一)项目分析步骤:6步1.选取代表性样组N人,按规定程序施测。2.按测验总分的高低次序排列,从最高分开始向下取27%(50%)为高分组,从最低分开始向上取27%(50%)为低分组。3.分别计算高分组和低分组在每一个测题上的通过率,即PH和PL。4.按照公式P=(PH+PL)/2和D=PH–PL计算测题的难度和区分度。5.作项目分析报告。6.根据项目分析报告,修改或选择测题。(一)项目分析步骤:6步1.选取代表性样组N人,按规定程序施75项目分析例题:项目分析例题:76(二)项目分析报告格式:3类分析报告格式:3类1、项目分析简表2、难度与区分度双向表3、项目分析综合表(二)项目分析报告格式:3类分析1、项目分析简表2、难度与区771、项目分析简表题号PHPLPD评价1234561、项目分析简表题号PHPLPD评价12345678项目分析简表实例:项目分析简表实例:792、难度区分度双向表PR0-0.10.1-0.30.3-0.80.7-0.90.9-1.0总计0-0.1110.1-0.331150.3-1.067927399总计01063284105应有5%15%60%15%5%100%实有01063284105符数0663273992、难度区分度双向表P0-0.10.1-0.30.3-0.880六、项目分析的特殊问题一、多重选择题的项目分析(诱答分析)多项选择题因能有效控制被试的猜测误差,能测量较复杂的认知目标,能为改进教学提供较多的反馈信息,且易于评分,可用计算机阅卷等诸多优点,在教育测验中,应用广泛。对于多重选择题,除了分析难度和区分度外,还要对每个选项进行分析。六、项目分析的特殊问题一、多重选择题的项目分析(诱答分析)81多项选择题例题:下列动物中,那些动物是澳洲特有的物种()A、雪豹B、袋鼠C、考拉D、狒狒E、鸭嘴兽多项选择题例题:下列动物中,那些动物是澳洲特有的物种(821、正确的选项被所有被试选择,说明……2、正确的选项没有一个被试选择,说明……3、如果所有被试都选择某个错误选项,说明……4、如果没有一个被试选择某个错误选项,说明该选项……选择题备选答案质量分析:1、正确的选项被所有被试选择,说明……选择题备选答案质量分析83选择题备选答案质量分析:5、如果高分组被试的选择集中在两个选项上且两者的被选择率接近,说明……6、如果高分组对正确答案的选择率等于或低于低分组,说明该题……7、如果所有被试都未回答某个题目或者选择各个选项的人数几乎相等,说明该题……选择题备选答案质量分析:5、如果高分组被试的选择集中在两个84第三节项目分析实例第三节项目分析实例85项目分析步骤1、选取代表性样组N人,按规定程序施测。2、按测验总分的高低次序排列,从最高分开始向下取27%(50%)为高分组,从最低分开始向上取27%(50%)为低分组。3、分别计算高分组和低分组在每一个测题上的通过率,即PH和PL。4、按照公式P=(PH+PL)/2和D=PH–PL计算测题的难度和区分度。5、作项目分析报告。6、根据项目分析报告,修改或选择测题。项目分析步骤1、选取代表性样组N人,按规定程序施测。86项目分析例题:项目分析例题:87项目分析简表实例:项目分析简表实例:88本章复习题:5个1.什么是项目分析及意义2.难度的计算方法?3.难度的矫正公式?4.什么是项目的区分度及区分度的计算方法?5.测验的项目分析步骤?本章复习题:5个1.什么是项目分析及意义89谢谢大家!!谢谢大家!!90心理测量学Mentalmeasurement

精神卫生学院

曹运华第六章项目分析

Itemanalysis心理测量学精神卫生学院第六章项目分析

Item91我们本章要解决的问题:5个1.什么是项目分析及意义2.什么是难度及难度的计算?3.难度的矫正公式?4.什么是项目的区分度及区分度的计算方法?5.测验的项目分析实例我们本章要解决的问题:5个1.什么是项目分析及意义92本章前提:本章前提:93怎样从校区到龙沙公园?怎样从校区到龙沙公园?94怎样从校区到龙沙公园?1.大家知道两者的距离大约是?2.那方法和工具都有哪些啊?3.如果咱们把距离拉远,从齐市到哈市的方法都有哪些啊?4.各方法的效率是一样的吗?怎样从校区到龙沙公园?1.大家知道两者的距离大约是?95小结论:1.要想高效、经济地达到目的,选择一个合适的、良好的工具是必要的条件。2.测量也是如此,要想完成测量目的,必须选择一个质量良好的测量工具,对心理测量来说,就是选择一个良好的测验。3.那么如何才能确定一个测验质量是良好的?小结论:1.要想高效、经济地达到目的,选择一个合适的、良好的96一.如何对测验进行分析和鉴定?(一)测验进行鉴定Testanalysis(二)题目进行鉴定Itemanalysis鉴定测验的方法一.如何对测验进行分析和鉴定?(一)测验进行鉴定(二)题目进97(一)如何对整个测验进行鉴定?整个测验定性分析统计量分析信度值效度值(一)如何对整个测验进行鉴定?整个测验定性分析统计量分析信度98(二)组成测验的题目进行鉴定项目分析定性分析定量分析难度值区分度(二)组成测验的题目进行鉴定项定性分析定量分析难度值区分度99总结:好的题目好的测验有效完成测量目的总结:好的题目好的测验有效100二.项目分析的意义:5个1.可以为筛选和修改测题提供依据。2.有助于提高测验的信度和效度。3.有助于标准化题库的建设。4.有助于测验结果的合理解释。5.有助于测验编制技能和技巧的提高。二.项目分析的意义:5个1.可以为筛选和修改测题提供依据。101第一节测验的难度

Testdifficulty第一节测验的难度

Testdiff102一、难度的意义难度(difficulty):是指测验项目(题目)的难易程度。想一想:1、在期末考试时数学老师出了一套考试试卷,全班30人中26人考了95分以上,这个试卷的题目难吗?2、要是30人中26人考了50分以下,这个测验难吗?一、难度的意义难度(difficulty):是指测验项目(题103二、难度的计算:公式1(一)二分法记分的项目计算P:难度R:答对该题的人数N:全体被试人数二、难度的计算:公式1(一)二分法记分的项目计算P:难度104阅读:什么是二分法计分?二分法计分:即一题目的得分只有0分、满分两种可能,也就是说被试答对该题得满分,答错了得0分。大家想一下,它的适用题型有哪些:1、选择题;2、填空题;3、判断题等。阅读:什么是二分法计分?二分法计分:即一题目的得分只有0分、105例题及分析:例题1:设有80名被试参加某一个测验,答对其中某题的有32人,问该题的难度指数是多少?想一想:1、P值的范围?2、P值与测题难度的关系?例题及分析:例题1:设有80名被试参加某一个测验,答对其中某106分析与结论:P与难度1、P值的范围:[0,1]2、P值越大,难度越小;P值越小,难度越大。3、其中P=0和P=1是极端难度。分析与结论:P与难度1、P值的范围:[0,1]107『想一想』:此公式适用条件1.用公式1计算一个测题的难度,需要知道哪些条件(数据)?2.要是被试人数较多(N>100),用这个公式计算测题难度系数就会出现什么情况?『想一想』:此公式适用条件1.用公式1计算一个测题的难度,需108计算:公式2P:难度Ph:高分组的通过率Pl:低分组的通过率计算:公式2P:难度Ph:高分组的通过率109阅读:高分组和低分组怎么划分?在人数较多的时候,不宜采用公式1进行运算,这是可用极端分组法进行计算。分组的步骤如下:1、先把所有被试的总分按从高到低排列2、从最高分开始向下取27%的被试作为高分组;3、从最低分开始向上取27%的被试为低分组。阅读:高分组和低分组怎么划分?在人数较多的时候,不宜采用公式110相关例题分析1:书上例题:P73在370名被试中,高分组有70人答对第一题,低分组有40人答对第一题,那么该题的难度是多大?该怎样解答该题啊?相关例题分析1:书上例题:P73111相关例题分析2:2000年华东师范大学考试题(3分):一个测验高分组有80%的被试通过,低分组12%的被试通过,那么该题的难度是多少?相关例题分析2:2000年华东师范大学考试题(3分):112计算:公式3(二)非二分计分项目的难度计算:P:难度X:被试的平均得分X:该题的满分值计算:公式3(二)非二分计分项目的难度计算:P:难度X:113阅读:什么是非二分计分?非二份计分:是指被试在一个题目上的得分有从0分到满分的多种可能。大家想一下,和二分法计分相比,非二分法计分适用题型有哪些:1、简答题;2、论述题;3、作文题等阅读:什么是非二分计分?非二份计分:是指被试在一个题目上的得114例题分析1:书上例题2:P74数学测验的第七题的满分是15分,在该题上考生的平均得分是9.6分,则该题的难度是多少?例题分析1:书上例题2:P74115相关例题分析2:例题2:一测验的第3题的满分是15分,在该题上高分组考生的平均得分是9.6分,低分组考生的平均得分是3.6分,则该题的难度指数是多少?相关例题分析2:例题2:116三、难度的矫正公式在选择题和判断题上,有一个重要的问题是:测验得分是被试能力的反应还是因为猜测而获得的成功。比如:考试时有选择题不会,你会怎么办?这样大量的猜测会对被试在选择题和判断题的分数产生影响。三、难度的矫正公式在选择题和判断题上,有一个重要的问题是:测117『想一想』猜测误差的种类在客观性测题(选择、是非等)中,不可避免的存在着猜测误差。那么,想一下猜测误差的种类有哪些?这样大量的猜测会对选择题和判断题的分数产生影响,这时就需要进行矫正。『想一想』猜测误差的种类在客观性测题(选择、是非等)中,不可118(一)难度的矫正公式:CP:矫正后的难度P:未矫正前的难度K:备选答案的数量。(一)难度的矫正公式:CP:矫正后的难度P:未矫正前的119相关例题分析:2002年华东师范大学考试题(4分):某一个测验中,一个五选一的测题的难度值是0.61,另外一个四选一的测题难度是0.64,请问这两个测题的哪个题难度较大?该怎样才能正确解答?相关例题分析:2002年华东师范大学考试题(4分):120(二)猜测校正的基本假设:校正公式的基本假设是:被试不知道正确答案时,完全凭猜测作答,猜测的成功与否完全由随机因素所致,即被试选择某一个备选答案是随机决定的。小问题:大家同意这个假设吗?同意,为什么?不同意,为什么?(二)猜测校正的基本假设:校正公式的基本假设是:被试不知道正121(三)赞成使用的观点:2个1.校正后的得分可以反应被试得分的真正水平和能力。2.在教育测验中,可以培养学生诚实的美德。(三)赞成使用的观点:2个1.校正后的得分可以反应被试得分的122(四)反对使用的观点:3个1.校正公式并不是对难度系数的真正校正。2.公式的基本假设不成立。3.在实际生活中,经常缺乏充分的证据和资料,这时进行合理地猜测是值得培养的能力。(四)反对使用的观点:3个1.校正公式并不是对难度系数的真正123四、难度对相对性一测题的难度并不是固定不变的,它为因情况不同而有所变化。也就是说,难度是相对的。影响难度性对性的因素:1、团体的平均水平;2、测验的编制技术。四、难度对相对性一测题的难度并不是固定不变的,它为因情况不同124五、难度对测验的影响1.难度影响测验分数的分布形态及范围2.影响测验分数的离散程度3.影响测验项目的鉴别能力五、难度对测验的影响1.难度影响测验分数的分布形态及范围125分数分布形态:正偏态分数分布形态:正偏态126『想一想』正偏与难度关系?1.大家想一想,测验分数分布是正偏态分布,说明了什么情况?2.大部分被试的得分是比较高还是比较低?3.分数正偏态分布是说明测验较难还是相对比较容易?『想一想』正偏与难度关系?1.大家想一想,测验分数分布是正偏127分数分布形态:负偏态分数分布形态:负偏态128『想一想』负偏与难度关系?1.大家想一想,测验分数分布是负偏态分布,说明了什么情况?2.大部分被试的得分是比较高还是比较低?3.分数负偏态分布是说明测验较难还是相对比较容易?『想一想』负偏与难度关系?1.大家想一想,测验分数分布是负偏129相关例题分析:1997年北京师范大学实验心理学(含心理测量)试题。简答题(5分)2、记忆实验中出现很多被试的记忆量达到了100%的现象,说明此实验处理存在什么问题,应如何改进?相关例题分析:1997年北京师范大学实验心理学(含心理测量)130正偏与负偏及处理方法:1.正偏态分布:即大多数集中在低分端,说明测验对被试来说偏难,因此必须增加足够数量的较容易的项目。2.负偏态分布:即大多数被试的得分集中在高分端,说明题目偏易,应该增加一些较高难度的项目。正偏与负偏及处理方法:1.正偏态分布:即大多数集中在低分端,131分数分布形态:正态分数分布形态:正态132六、难度水平的确定项目的难度水平多高合适,取决于测验的目的以及测验的性质。1.当测验为教育测验和总结性测验时,可以不过多考虑难度,只要教育者认为重要的内容就可选用。2.当测验目的是选拔录用人员时,难度视录取率而定。3.一般性测验中的难度应怎么样?六、难度水平的确定项目的难度水平多高合适,取决于测验的目的以133七、难度的等距转换1.以项目的通过率P来表示一个项目的难度,计算方便,便于理解。2.它是属于何种测量水平?3.这样的难度系数是否存在什么问题?七、难度的等距转换1.以项目的通过率P来表示一个项目的难度,134相关例题分析:现已知某一个测验的第一题的难度P为0.027,第二题的难度P为0.50,第三题难度P为0.84,请问,这三道题中:1、难度最大的是哪道题?2、第一题比第二题难多少?3、第二题比第三题难多少?相关例题分析:现已知某一个测验的第一题的难度P为0.027,135总结:难度的等距转换顺序等距总结:难度的等距转换顺序等距136(一)难度等距转换步骤:5步法1.计算项目的通过率P;2.把P转换为从右至左而行的正态曲线下的面积;3.查Z表,看对应面积的Z值;4.按Z′=13+4Z转换;5.比较Z′值。(一)难度等距转换步骤:5步法1.计算项目的通过率P;137补充知识:正态曲线下的面积补充知识:正态曲线下的面积138面积转换示意图:面积转换示意图:139(二)相关例题分析1:现已知某一个测验的第一题的难度P为0.027,第二题的难度P为0.50,第三题难度P为0.84,请问,这三道题中:1、难度最大的是哪道题?2、第一题比第二题难多少?3、第二题比第三题难多少?(二)相关例题分析1:现已知某一个测验的第一题的难度P为0.140(二)相关例题分析2:现已知有80人参加某一个测验,其中答对第一题的人数是32人,答对第二题的人数是48人。请问:1、这两道题的难度差距是多少?(二)相关例题分析2:现已知有80人参加某一个测验,其中答对141第二节测验的区分度

Testdiscrimination第二节测验的区分度

Testdiscrimin142一、区分度的意义:项目的效度(一)区分度(discrimination):又称鉴别力,是指测验项目对被试心理品质水平差异的区分能力或鉴别能力。(二)区分度的重要性:(1)测验有效的“指示器”;(2)评价测题质量,筛选测题的主要指标,又被称为“项目的效度”。一、区分度的意义:项目的效度(一)区分度(discrimin143具有良好区分度的项目,应该将不同水平的被试区分开来。中得分高高水平被试低中等得分低具有良好区分度的项目,应该将不同水平的被试区分开来。中得分高144二、区分度的计算:2类区分度计算方法:(一)鉴别指数法(二)相关法二、区分度的计算:2类区分(一)鉴别指数法(二)相关法145二、区分度的计算(一)鉴别指数法discriminationindex高分组和低分组通过率的差别,来计算区分度。情景:常用、易用(二)相关法interrelated

method单一项目分数与效标分数或测验总分的相关可作为区分度的指标。适用情景:大规模测验或标准化测验。二、区分度的计算(一)鉴别指数法discriminatio146(一)鉴别指数法1.鉴别指数(D指数):高分组与低分组的通过率之差。计算公式:D=PH–PL大家想一想,根据计算公式:(1)D的取值范围是多少?(2)D值与项目质量的关系?(一)鉴别指数法1.鉴别指数(D指数):高分组与低分组的通过147例题:1999年华东师大考研计算题:一个测验的测题全部是由五选一的选择题组成的,其中第一题上端27%的被试P=0.75,下端27%的被试P=0.35,请问它的鉴别力多大?例题:1999年华东师大考研计算题:148D的判定:D值范围测题的质量评价D>0有效区分保留D=0无区分D<0消极区分舍弃D的判定:D值范围测题的质量评价D>0有效区分保留D=0无区1492.伊贝尔鉴别指数标准:鉴别指数D题目质量评价0.40以上很好0.30-0.39良好,修改会更好0.20-0.29尚可,仍修修改0.19以下差,需淘汰2.伊贝尔鉴别指数标准:鉴别指数D题目质量评价0.40以上很150例题:1999年华东师大考研:计算题:一个测验的测题全部是由五选一的选择题组成的,其中第一题上端27%的被试P=0.75,下端27%的被试P=0.35,它的鉴别力多大,该题可以接受吗该怎样作答?例题:1999年华东师大考研:计算题:1513.项目特征曲线:通过率1.000.000.50低中高能力ABCD3.项目特征曲线:通过率1.000.000.50低152项目特征曲线分析:题号质量评价态度1??2??3??4??项目特征曲线分析:题号质量评价态度1??2??3??4??153项目特征曲线分析:题号质量评价态度1有效区分保留2无区分舍弃3低区分舍弃?最好修改4无效区分舍弃项目特征曲线分析:题号质量评价态度1有效区分保留2无区分舍弃154(二)相关法interrelated

method假设:特质水平测验总分数项目分数(二)相关法interrelatedmethod假设:1551.点二列相关条件:项目是二分记分,效标或总分是连续变量。1.点二列相关156相关例题分析:15名被试效标分数和一题目得分序号123456789效标657031498050351681题分010110100相关例题分析:15名被试效标分数和一题目得分序号1234561572、二列相关适用条件:两个都是连续变量,但其中一个变量被人为分成两类。2、二列相关1583、φ相关适用条件:两个变量都是二分类型的变量3、φ相关1594、积差相关适用条件:两个变量均是连续变量。4、积差相关160三、区分度与难度的关系难度区分度三、区分度与难度的关系难度区分度161区分度与难度的关系:1、极端难度:区分度低2、中等难度:区分度最大3、大家想一下,想提高测验的区分度,根据难度和区分的关系,一个可行的方法是什么?办法:难度正态分布,并把大部分测题的难度保持在中等难度区分度与难度的关系:1、极端难度:区分度低162四、区分度的相对性1.计算方法不同,区分值也不同;2.用相关法计算受样本容量大小的影响;3.用鉴别指数计算受分组标准的影响;4.受被试团体异质性的影响;5.受题目难度的影响.四、区

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论