信度和效度-实验心理学

实验设计的信度和效度实验心理学教研室梁丽娟Tel-mail:lianglijuan_2005@163.com一.实验设计的效度一.实验设计的信度一.实验设计的效度和信度的关系一.实验设计的效度推广性——实验效度指实验方法能达到实验目的的程度，也就是实验结果的准确性和有效性程度。效度包括：（一）内部效度（二）外部效度实验表情与情绪的感染:请拿出一支笔,把它咬在嘴里……看卡通片,并对卡通平进行评价（一）内部效度内部效度:实验数据偏离真值的程度,或系统误差的大小,自变量和因变量之间关系的明确程度。（一）内部效度影响内部效度的因素：历史（经历）历史事件指那些在实验过程中，与实验变量同时发生，并对实验结果产生影响的特定事件。周期比较长的实验容易历史因素的影响。例如，很多教育实验往往需要较长周期，所以历史事件对实验结果的影响应该得到关注和考虑。（一）内部效度影响内部效度的因素：成熟或自然发展的影响在长期实验中，被试随着年龄的增长，将会变得日益成熟，经验和能力都会得到提高。参与时间较短的实验，被试也会发生疲倦、困倦、无聊、饥饿或其它变化，这些变化也会改变他们在实验中的行为。如：练习效应、学习效应、疲劳效应（一）内部效度影响内部效度的因素：选择选择因素指由于没有用随机取样和随机分配的方法来选择两组或几组被试，因而在实验处理之前各被试组在各方面就事先存在着差异。随机化选择和分配被试的必要性、教育研究中的自然班的问题（一）内部效度影响内部效度的因素：测验指由于实验处理之前所施行的前测量可能积极地或消极地影响着实验处理后的测量，进而混淆实验的结果。在有前测的实验中，被试可能会由于在前测中获得了经验，从而提高了在后测中的答题能力；也可能会由于前测带来疲劳而影响到后测的成绩（前测和后测间隔时间很短）。（一）内部效度影响内部效度的因素：被试亡失在一个延续时间较长的研究中，被试的更换、淘汰或中途退出可能会对实验结果产生显著影响。例如，在有实验组和控制组的两组实验中，由于控制组在中途有优秀生转学进来，结果实验组效果很好，这就可能是由于被试更换造成两组被试不等而造成的，而不一定就是实验处理的效果。周期比较长的实验容易发生（一）内部效度影响内部效度的因素：统计回归指由于选用在某一特征方面具有极端分数（最优或最差）的被试，到了实验后期测验时分数通常会发生自然向群体的平均值靠拢的趋势（集中趋势）——变得不再是最优或最劣，在重复测量中分数向平均分靠拢。例：提高非洲裔儿童的阅读成绩的计划?（一）内部效度影响内部效度的因素：仪器使用指实验中测试手段、技术和工具的失效或缺乏一致性。这可能是测试工具发生了变化（如仪器失灵、问卷涂损等），或者是在实验过程中由于试验者主观情绪状态发生变化（如变得更严格、疲倦或粗心等），或者是评判标准发生了变化（如前后难度不同，不同班用不同的测验，或者评判者的差异等），这些情况带来的可能结果是测量和评级的精确性的会受到严重影响。

（二）外部效度外部效度:外部效度是指实验结果能够普遍推论到样本的总体和其它同类现象中去的程度，即实验结果的普遍代表性和适用性

。

实验设计的核心在于实验控制，但是，在人为控制创设的实验情景下得出的规律，其推论也往往有相当的局限性。（二）外部效度影响外部效度的因素：实验环境的人为性被试样本缺乏代表性测验工具的局限性（二）外部效度影响外部效度的因素：实验安排的反作用霍桑效应（安慰剂效应）：美国学者罗茨里伯格和迪克森（1939）在芝加哥市郊霍桑地区的西部电器工厂进行有关工作条件与生产效率关系的实验研究。照明条件进一步改善，生产效率又随之提高。研究者抱着严谨的态度，为了进一步证实其科学结论，在把灯光转暗，但是这是出乎意料的结果出现了，生产效率仍然跟着提高！（二）外部效度影响外部效度的因素：实验者或实验助理人员的偏向

皮格马利翁效应（期望效应）：在美国心理学家罗森塔尔和雅各布（1968）一项针对实验者的期望对被试带来的影响所进行的一项实验中，被预测为将有较大进步的学生在下一学年中却果然进步神速，在学业考试中出类拔萃。（三）.

内部效度和外部效度的关系1.内部效度跟所得结果的唯一解释性有关，外部效度跟结果的可推广性有关。研究的内部效度与外部效度之间存在既统一又排斥的关系。2.内部效度是外部效度的必要条件，但不是充分条件。3.不同的研究,侧重点不一样,但是最好是先保证内部效度，然后才是外部效度二.实验设计的信度可信度——实验信度指的是实验结论的可靠性和前后一致性程度。（一）影响实验信度的因素1.观察量。观察量越大就越有理由相信样本统计值接近总体参数值，也就是样本更能代表其所在的总体。2.对结果的统计检验。偶然因素造成结果的概率低于5%；但仍有5%的犯错误的概率。实验信度和效度应用——实验评价实验假设：二战期间研究者假设训练中惩罚比奖励更有效。实验材料：雷达屏幕中的敌，我飞机剪影。实验任务：飞机剪影出现按键反映敌或我。实验过程：第一天，被试在每个刺激辨别后告知成绩；第二天起，随机分配到2个组。A组争取辨认后获得10美分奖励，错误不给惩罚；B组的被试每个错误辨认都会遭到电击，而正确反应不奖励。这个程序持续3~4天，到第5天A组5%，B组35%退出实验。结果：1