社会调查原理

1、社会测量的信度与效度社会测量的信度与效度 组员：组员： 朱红燕朱红燕 郑婷婷郑婷婷 吴姗吴姗 吴家飞吴家飞 王柳琴王柳琴 目录 引言 一社会测量的效度 二社会测量的信度 三信度与效度的关系 四提高信度与效度的主要途经 测量的信度与效度测量的信度与效度 在社会调查中，任何一种精确地、系统地收集资料的方法，实际上在社会调查中，任何一种精确地、系统地收集资料的方法，实际上 都是一种特定形式的社会测量。而对于任何一种测量尺度或测量手都是一种特定形式的社会测量。而对于任何一种测量尺度或测量手 段来说，必然会涉及到这样一些基本问题：段来说，必然会涉及到这样一些基本问题： （1 1）测量所得的数据或资料是否

2、与人们感兴趣的特征有关？）测量所得的数据或资料是否与人们感兴趣的特征有关？ （2 2）测量所得的结构是否正是人们所希望测量的东西？）测量所得的结构是否正是人们所希望测量的东西？ （3 3）当这种测量的时间、地点、操作者发生改变时，测量的结果）当这种测量的时间、地点、操作者发生改变时，测量的结果 将会受到什么样的影响？将会受到什么样的影响？ 所有这些涉及到测量的信度和效度问题。所有这些涉及到测量的信度和效度问题。 一、社会测量的信度一、社会测量的信度 信度即信度即可靠性可靠性，它的指是采取同样的方法对，它的指是采取同样的方法对 同一对象重复进行测量时，其所得同一对象重复进行测量时，其所得结果相一

3、致的程结果相一致的程 度度。换句话说，信度是指测量结果的一致性或稳定。换句话说，信度是指测量结果的一致性或稳定 性，即测量工具能否稳定地测量所测的事物或变量。性，即测量工具能否稳定地测量所测的事物或变量。 比如，用同一台磅秤去称某一物体的重量，如比如，用同一台磅秤去称某一物体的重量，如 果称了几果称了几都得到相同的结果，则可以说这台磅秤都得到相同的结果，则可以说这台磅秤 的信度很高；如果几的信度很高；如果几测量的结果互不相同，则可测量的结果互不相同，则可 以说它的信度很低，或者说这一以说它的信度很低，或者说这一量工具是不可信量工具是不可信 的。的。 对同一群对象采用同一种测量，在不同的时间点先

4、对同一群对象采用同一种测量，在不同的时间点先 后测量两次，根据两次测量的结果计算出相关系数，这后测量两次，根据两次测量的结果计算出相关系数，这 种相关系数就叫做种相关系数就叫做再测信度。再测信度。 这是一种最常用、最普遍的信度检查方法。这是一种最常用、最普遍的信度检查方法。 再测信度的再测信度的缺点缺点是：容易受到时间因素的影响，即在是：容易受到时间因素的影响，即在 前后两次测量之间的某些事件、活动的影响，会导致后前后两次测量之间的某些事件、活动的影响，会导致后 一次测量的结果客观上发生改变，使两次结果的相关系一次测量的结果客观上发生改变，使两次结果的相关系 数不能很好地反映两次测量的实际情况

5、。数不能很好地反映两次测量的实际情况。 大部分信度指标都以相关系数大部分信度指标都以相关系数( () )来表示来表示 其基本的其基本的类型类型主要有以下种：主要有以下种： （1 1）再测信度）再测信度 在社会研究中，研究人员可以设计两份研究问卷，每份在社会研究中，研究人员可以设计两份研究问卷，每份 使用不同的项目，但都用来测量同一个概念或事物，对同一使用不同的项目，但都用来测量同一个概念或事物，对同一 群对象群对象同时同时用这两份问卷进行测量，然后根据两份问卷所得用这两份问卷进行测量，然后根据两份问卷所得 的分数计算其复本信度。的分数计算其复本信度。 复本信度复本信度可以避免上述再测信度的缺点

6、可以避免上述再测信度的缺点，但是，它的要，但是，它的要 求是：所使用的复本必须是真正的复本，即二者在形式、内求是：所使用的复本必须是真正的复本，即二者在形式、内 容等方面都应该完全一致。然而，在实际研究中，真正使研容等方面都应该完全一致。然而，在实际研究中，真正使研 究问卷或其他类似的测量工具达到这种要求往往是一件十分究问卷或其他类似的测量工具达到这种要求往往是一件十分 困难的事情。困难的事情。 （2 2）复本信度）复本信度 再测信度，复本信度，的共同特点都是必须进过两次调再测信度，复本信度，的共同特点都是必须进过两次调 查才能检验其信度，在调查只实施一次的情况下，通常采用查才能检验其信度，在

7、调查只实施一次的情况下，通常采用 折半法估计测量的信度。折半法估计测量的信度。即将调查的所有问题按性质、难度即将调查的所有问题按性质、难度 编好单双数，在单数题目的回答结果与双数题目的回答结果编好单双数，在单数题目的回答结果与双数题目的回答结果 之间求相关，这一相关系数就叫做折半信度之间求相关，这一相关系数就叫做折半信度。这里必须注意。这里必须注意 的是，由于问卷是按折半拟出的，因而问卷题目只是原来的的是，由于问卷是按折半拟出的，因而问卷题目只是原来的 一半。一半。 （3 3）折半信度）折半信度 社会调查的可靠与可信是科学的社会调查最基本社会调查的可靠与可信是科学的社会调查最基本 的要求。但是

8、在实际上的社会调查过程中，由于所使用的的要求。但是在实际上的社会调查过程中，由于所使用的 调查方法不当或其他种种因素的干扰，社会调查的信度会调查方法不当或其他种种因素的干扰，社会调查的信度会 受到影响。影响社会调查信度的受到影响。影响社会调查信度的主要因素主要因素有：有： （1 1）抽样调查所依据的样本容量的大小。）抽样调查所依据的样本容量的大小。 （2 2）抽样方法不当（或典型的选择不当），造成较）抽样方法不当（或典型的选择不当），造成较 大的大的 抽样误差。抽样误差。 （3 3）所使用的测量工具不当或不全面。）所使用的测量工具不当或不全面。 影响社会调查信度的主要因素：影响社会调查信度的主

9、要因素： 一般通过使用同一量表进行不同测量，分析各测量一般通过使用同一量表进行不同测量，分析各测量 结果之间联系的方法来评价信度。如果联系密切，各测量结果之间联系的方法来评价信度。如果联系密切，各测量 结果具有一致性，则认为量表是可信的。结果具有一致性，则认为量表是可信的。 评价信度的方法主要有评价信度的方法主要有：再预测量：再预测量 替换形式替换形式 内部一致性方法。内部一致性方法。 信度评估方法信度评估方法 社会测量的效度也称做社会测量的效度也称做测量的有效度或准确度测量的有效度或准确度。 它是指测量工具或测量手段能够准确测出所要测量的变量它是指测量工具或测量手段能够准确测出所要测量的变量

10、 程度，或者说能够准确、真实地度量事物属性的程度。程度，或者说能够准确、真实地度量事物属性的程度。 结合前面所介绍的有关概念，我们也可以说，结合前面所介绍的有关概念，我们也可以说，效度指效度指 的是测量标准或所用的指标能够如实反映某一概念真正含的是测量标准或所用的指标能够如实反映某一概念真正含 义的程度。义的程度。 当一项测量所测的正是它所希望测量的事物时，我们当一项测量所测的正是它所希望测量的事物时，我们 就说这一测量具效度，或者说它是一项有效的测量。反之，就说这一测量具效度，或者说它是一项有效的测量。反之， 则称为无效的测量或者测量不具有效度。则称为无效的测量或者测量不具有效度。 二、社会

11、测量的效度二、社会测量的效度 测量的效度具有三种不同的类型，即测量的效度具有三种不同的类型，即表面效度、准表面效度、准 则效度和结构效度则效度和结构效度。它们分别从不同的方面反映测量的。它们分别从不同的方面反映测量的 准确程度。准确程度。 （1) 1)表面效度表面效度。也称内容效度或逻辑效度，指的是测量也称内容效度或逻辑效度，指的是测量 内容与测量目标之间的适合性和相符性。例如，有人内容与测量目标之间的适合性和相符性。例如，有人 使用使用“领导是否由群众推选产生领导是否由群众推选产生”，“群众能否随时群众能否随时 随地找领导提意见或要求随地找领导提意见或要求”来测量民主这个变量，显来测量民主这

12、个变量，显 然这两个测量具有一定的表面效度。而如果用然这两个测量具有一定的表面效度。而如果用“群众群众 是否随时随地向领导提意见和要求是否随时随地向领导提意见和要求”作为作为“劳动积极劳动积极 性性”这个变量的测量项目，则表面效度就不高；如果这个变量的测量项目，则表面效度就不高；如果 用用“领导是否由群众推选产生领导是否由群众推选产生”作为作为“劳动积极性劳动积极性” 的测量项目，则没有表面效度的测量项目，则没有表面效度。 （2) 2)准则效度。准则效度。也称小标度或标准关联效度。是指也称小标度或标准关联效度。是指 以某次测量的结果为标准，来评价与之相关的另一测以某次测量的结果为标准，来评价与

13、之相关的另一测 量的有效性。例如，评价汽车驾校笔试成绩的效度，量的有效性。例如，评价汽车驾校笔试成绩的效度， 要看考生毕业后的实际驾车技术（如事故发生率），要看考生毕业后的实际驾车技术（如事故发生率）， 如果这两个测量之间的相关性较高（比如，考生在驾如果这两个测量之间的相关性较高（比如，考生在驾 校的笔试成绩较高，其毕业后的驾车技术也较好），校的笔试成绩较高，其毕业后的驾车技术也较好）， 说明该汽车驾校的笔试成绩是有效的，反之，就说明说明该汽车驾校的笔试成绩是有效的，反之，就说明 该驾校的笔试成绩的有效性值得怀疑。这里，考生的该驾校的笔试成绩的有效性值得怀疑。这里，考生的 实际驾车技术就是评价

14、其笔试成绩效度的标准实际驾车技术就是评价其笔试成绩效度的标准。 （3) 3) 结构效度结构效度。它涉及到一个理论的关系结构中其他概念。它涉及到一个理论的关系结构中其他概念 （或变量）的测量。比如，假定我们设计了一种测量方法，来（或变量）的测量。比如，假定我们设计了一种测量方法，来 测量人们的测量人们的“婚姻满意程度婚姻满意程度”。为了评价这种测量方法的效度，。为了评价这种测量方法的效度， 我们需要用到与婚姻满意程度有关的理论命题或假设中的其他我们需要用到与婚姻满意程度有关的理论命题或假设中的其他 变量。假定我们有下列假设：婚姻满意程度与主动做家务的行变量。假定我们有下列假设：婚姻满意程度与主动

15、做家务的行 为有关。婚姻满意程度越高，越是主动承担家务。那么，如果为有关。婚姻满意程度越高，越是主动承担家务。那么，如果 我们的测量在婚姻满意程度与承担家务方面的结果具有一致性，我们的测量在婚姻满意程度与承担家务方面的结果具有一致性， 则称我们的测量具有结构效度。如果婚姻满意程度不同的对象则称我们的测量具有结构效度。如果婚姻满意程度不同的对象 在承担家务方面的行为都是一样的，那么，我们测量的结构效在承担家务方面的行为都是一样的，那么，我们测量的结构效 度就面临挑战。度就面临挑战。 影响测验效度的因素影响测验效度的因素很多，除了前面介绍的影响信度的因素以外，很多，除了前面介绍的影响信度的因素以外

16、， 测验本身、测验的实施和被试等都会对效度产生影响。其中有些因素测验本身、测验的实施和被试等都会对效度产生影响。其中有些因素 的影响较为普遍且明显，有些因素的影响却不易察觉。的影响较为普遍且明显，有些因素的影响却不易察觉。 （一）测验本身（一）测验本身 1. 1.项目质量项目质量 测验的指导语和试题的解答说明不明确，试题的编测验的指导语和试题的解答说明不明确，试题的编 制不符合测量目的，试题难度不合适，试题的编排不合理，试题提供制不符合测量目的，试题难度不合适，试题的编排不合理，试题提供 了额外线索，选择题的答案排列具有明显的规律性等，都会影响测验了额外线索，选择题的答案排列具有明显的规律性等

17、，都会影响测验 的效度。的效度。 2. 2.项目数量项目数量 增加测验的长度不但能提高测验的信度，在一定程增加测验的长度不但能提高测验的信度，在一定程 度上也能提高测验的效度。度上也能提高测验的效度。 （二）测验的实施（二）测验的实施 在施测时不遵照指导语，被试作弊，测验环境太差，评分标准不客在施测时不遵照指导语，被试作弊，测验环境太差，评分标准不客 观，记分错误等等，都会影响测验的效度。观，记分错误等等，都会影响测验的效度。 （三）被试（三）被试 1. 1.身心状态身心状态 被试者的兴趣、动机、情绪、态度、反应心向和身体状况等都会影被试者的兴趣、动机、情绪、态度、反应心向和身体状况等都会影

18、响被试的反应，从而影响测验的效度。响被试的反应，从而影响测验的效度。 2. 2.样本特点样本特点 测验的效度和样本团体的特点具有很大的关系。同一个测验对于不测验的效度和样本团体的特点具有很大的关系。同一个测验对于不 同的样本团体其效度有很大的不同，因此在作效度分析时，必须选具同的样本团体其效度有很大的不同，因此在作效度分析时，必须选具 有代表性的被试团体。有代表性的被试团体。 样本团体的异质性对于测验效度是非常重要的。如果其他条件相同，样本团体的异质性对于测验效度是非常重要的。如果其他条件相同， 样本团体越同质，分数分布范围越小，测验效度就越低；样本团体越样本团体越同质，分数分布范围越小，测验

19、效度就越低；样本团体越 异质，分数分布范围越大，测验效度就越高。异质，分数分布范围越大，测验效度就越高。 效度评估方法效度评估方法 1. 1.专家判断法；专家判断法； 2. 2.统计分析法统计分析法; ; （评分者信度复本信度（评分者信度复本信度 折半信度折半信度 再测法）再测法） 3. 3.经验推测法（实验检验）经验推测法（实验检验） 4. 4.对测验本身的分析（用内容效度来验证构想效度）对测验本身的分析（用内容效度来验证构想效度） 信度是效度的信度是效度的必要条件，必要条件，但不是充分条件。一个测量工具但不是充分条件。一个测量工具 要有效度必须有信度，没有信度就没有效度；但是有了信度不一要有效度必须有信度，没有信度就没有效度；但是有了信度不一 定有效度。定有效度。 信度低，效度不可能高