版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
第三节实验设计
一、实验设计及评价标准1、实验设计(广义):是指根据研究目的,经过周密的思考而制定出的整个研究工作的具体计划和安排(董奇,2004)。2、实验设计(狭义):是指对人类或者动物的心理和行为进行实验性观察时,对控制条件的设计(RobertSolso,2002);包括如何选择被试、如何将被试分配到各实验条件、如何控制额外变量以及如何收集数据(RandolphSmith,2004);目的在于使研究者观察到实验处理效应(张学民,舒华,2004)。——第二节内容偏重于变量的界定和控制;而本节的内容侧重变量与变量之间关系的考察,即自变量处理效应的考察。第三节实验设计一、实验设计及评价标准13、好的实验设计的标准宏观评价(孟庆茂):(1)能够恰当地解决所欲解决的问题。(2)恰当地控制实验中的无关变量。(3)使实验结果有很高的可靠性。微观评价(舒华):(1)使研究变量的效应最大化(2)对额外变量进行有效控制(3)使实验误差变异最小化(4)充分体现自变量和因变量之间的内在联系。——构思效度和内部效度3、好的实验设计的标准2二、实验设计的分类(一)心理实验设计的宏观分类真实验设计,准实验设计,非实验设计(前实验设计与事后设计
)真实验设计:就是通常所说的实验设计,是以数理统计为基础的实验设计。其特征在于对影响内部效度的无关变量采取了严格的控制,能有效地控制研究中自变量的不同取值和因变量的指标,以及被试的分配情况,并可应用统计方法分析实验结果。
优点:条件控制严密;局限:自然性差,人为性强,生态效度低。二、实验设计的分类(一)心理实验设计的宏观分类3准实验设计:是指降低了实验控制的标准,通常在不易对被试进行随机取样,无法严格创设等组的条件下进行的设计。如:教学方法与教学效果;工作压力与工作效率优点:在真实性和生态效度上高于真实验设计。局限:无关变量控制不够严格、因果关系确定性弱准实验设计:是指降低了实验控制的标准,通常在不易对被试进行随4知识问答是先有真实验设计还是准实验设计?真实验设计是否代表着实验设计的发展趋势?——准实验设计是由Campbell&Stanley于1966年提出的,目的在于克服实验室实验的局限性。知识问答——准实验设计是由Campbell&Stanle51951-1959年康涅狄格州交通死亡人数(Campbell,1969)1951-1959年康涅狄格州交通死亡人数(Campbell6康涅狄格州(实线)和其他4个州的交通死亡率(Campbell,1969)康涅狄格州(实线)和其他4个州的交通死亡率(Campbell7非实验设计:是一种对自然条件下发生的心理现象进行观测、记录、描述的设计方法。这种设计往往不易采取随机化原则分配被试,而且也不易主动地控制自变量和其他无关变量,它可以为进一步实施更严格的设计积累资料。
(有关该概念的理解国内外有很大不同,比较混乱)
意义:为更高层次的真实验设计和准实验设计提供必要的基础和资料。局限:易受无关变量的影响。
包括:单组后测设计、单组前后测设计、固定组比较设计、事后回溯设计非实验设计:是一种对自然条件下发生的心理现象进行观8国外对非实验设计的看法非实验设计就是不用实验作为研究手段的研究设计。具体方法有:1.现象学方法(phenomenology),是指对自己的直接经验进行描述的方法。局限:(1)不能比较不同条件下被试的数据,因此不能得出因果关系的结论;(2)对自身心理活动的关注可能会改变正常的心理活动;(3)其结论不一定完全精确、客观,而且其研究结果不能推广到别人身上。2.个案研究法(casestudy),是指对他人的行为经验进行描述、记录的方法。常用于临床心理、特殊心理的系统研究。3.现场研究法(fieldstudy),在现实情境中进行的研究。常用于研究在实验中看不见的心理和行为。4.调查研究法(surveyresearch),包括问卷法和访谈法。经常与其他方法结合使用,也可以独立使用。国外对非实验设计的看法9(二)真实验设计的具体分类
1.按统计检验力分,完全随机设计、随机区组设计和拉丁方实验设计以上是三种最基本的实验设计方法,它们可以组合成各种复杂的实验设计。它们的区别在于控制无关变量的方法。分别采用随机化方法、区组技术、双重区组技术控制无关变量的影响。实验结果的检验精度逐级提高。
实验设计模型:完全随机设计:Yij
=μ+αj+εi(j)随机区组设计:Yij=μ+αj+πi+εi(j)拉丁方设计:Yijkl=μ+αj+βk+γl+εpooled(i=1,2,......,n;j=1,2,......,p;k=1,2,......,p;l=1,2,......,p)(二)真实验设计的具体分类1.按统计检验力分,完全随机设102.按自变量的数量分,单因素设计和多因素实验设计
单因素设计:实验中只有一个自变量,被试接受这个自变量的不同水平的实验处理的设计。
多因素设计:实验中有多个自变量,被试接受几个自变量水平的结合的实验处理。能探讨较复杂的因果关系,如交互作用,代表实验设计发展的一种趋势。
例:多媒体教学与传统教学的效果?2.按自变量的数量分,单因素设计和多因素实验设计113.按被试分派程序分,被试间设计、被试内设计和混合设计被试间设计:是指实验中每个被试只接受一种自变量水平或自变量水平的结合的设计。这种设计中的变量为被试间变量。被试内设计:是重复测量设计的一种形式,由一个被试(而不是一组同质被试)接受所有的自变量水平或自变量水平的结合的设计。实验中的自变量叫做被试内变量。混合设计:是指在一个实验设计中既有被试内自变量,又有被试间自变量的设计,是重复测量设计的一种复杂形式,是一种最有实用价值的实验设计。
4.其他的设计前后测设计,所罗门设计,小N设计,正交设计,嵌套设计3.按被试分派程序分,被试间设计、被试内设计和混合设计12三、实验设计的思想基础(复习)1.统计检验的基本思想
统计检验的目的:
确定从样本统计值得出的差异能否作出一般性的结论——总体参数之间确实存在差异。使用条件:当研究假说不能通过直接观察或通过观察总体的所有成员而直接被估价时,就需要通过统计推论间接地对它进行估价。如,6岁儿童的男女身高差异问题的研究。从某地区随机抽取男生30人,M1=114cm;女生27名,M2=112.5cm,能否根据这一次测量的结果下结论:6岁男生的身高比女生高?又如,中美小学生心算能力的比较研究。
心理学实证研究的结果,基本上都需要进行统计检验。
三、实验设计的思想基础(复习)1.统计检验的基本思想132.方差分析的基本思想
思考:统计发现三种教学方法考评结果的方差分析结果为:F(2,27)=1.0,请问差异是否显著?方差分析的主要功能:是分析因变量总变异中不同来源的变异的贡献量的多少,如实验处理引起的变异,被试个体差异带来的变异,实验误差带来的变异等。
“力是改变物体运动状态的原因”,运动状态的改变的表现就是“变异”;反过来,变异反映了物体受到了力的作用。任何一个心理变量的每一个观测值都凝聚着各种各样因素的影响。如,有一次辨别反应时的测量值为350ms。那么可能影响因素:简单RT,辨别能力,心理期望,注意不集中,疲劳,猜测,偶然因素……一组观测数据中,具体数值各不相同,之所以不同,就是变异来源很多。320315333318340327358365350380360375方差分析的目的在于考察系统的特定影响因素(自变量)是否对观测值有显著影响2.方差分析的基本思想14变异(variation):是“影响因素作用效果”的量化表现;衡量指标:标准差——方差(variance)——均方(每个自由度的平均变异);量化表现形式:平方和变异的来源:实验处理-实验处理之外的因素/组间变异-组内变异/组间均方-组内均方
F值:组间均方除以组内均方——组间变异(实验目的),组内变异(控制对象)
F检验的思想就好象把组间变异放在一个噪音(误差变异)的背景上,只有当组间变异足够大,明显不同于误差变异时,才说明处理效应是存在的。如果组间变异与组内变异相比差不多,则说明处理效应是不存在的。F(m,n)=1.0,意味着目标声音和背景声音一样响变异(variation):是“影响因素作用效果”的量化表现15四、实验设计模型
每一种实验设计都有一个特定的实验设计模型,它揭示了实验中一个观测值的构成,即影响一个观测值的所有变异源,为不同的实验设计提供了分解平方和的方法。例:单因素完全随机实验设计模型:Yij=μ+αj+εi(j)(i=1,2,......,n;j=1,2,......,p)Yij表示实验中第i个被试在第j个处理水平上的观测值。μ表示总体平均数,αj表示水平j的处理效应,εi(j)表示误差变异。实验设计模型的基本假设是:(1)模型Yij=μ+αj+εi(j)反映了影响实验中观测值Yij的所有变异源;(2)实验中包含了研究者感兴趣的处理水平(αj);(3)误差变异在每个处理总体内是以均数为0,方差为σ2e正态分布的。每一个被试的误差变异都独立于其他被试的误差变异。实验设计最重要的功能就是使处理效应最大,使误差变异最小。四、实验设计模型每一种实验设计都有一16五、方差分析中的常用术语
主效应(maineffects):实验中由一个因素的不同水平引起的变异。
交互作用(interaction):当一个因素的水平在另一个因素的不同水平上变化趋势不一致时,我们称这两个因素之间存在交互作用。
简单效应(simpleeffects):一个因素的水平在另一个因素的某个水平上的变异。
处理效应(treatmenteffect):由自变量引起的变异。主效应、交互作用和简单效应均属于处理效应。
误差变异(errorvariance):不能由自变量或明显的额外变量解释的那部分变异。
单元内误差(within-cellerror):几个被试接受同样的实验条件时,他们之间所出现的差异。被试个体差异导致的误差。作用:用来估计实验误差。
残差(residualerror):误差变异中除了单元内误差以外的误差,也应该是一种随机误差。如,只有一个被试接受一种实验处理时存在的误差。作用:用来估计实验误差五、方差分析中的常用术语17六、真实验设计(一)单因素实验设计1.单因素完全随机实验设计(1)单因素完全随机实验设计的基本特点:适用条件:研究中有一个自变量,自变量有两个或多于两个水平。基本方法:把被试随机分配给自变量的各个水平,每个被试只接受一个水平的处理。误差控制:随机化法。假设被试之间的变异在各水平之间是随机分布的,在统计上无差异。实验设计模型:Yij=μ+αj+εi(j)(i=1,2,...,n;j=1,2,...,p)Yij表示实验中第i个被试在第j个处理水平上的观测值。μ表示总体平均数,αj表示水平j的处理效应,εi(j)表示误差变异。即:总变异由两部分组成:实验处理引起的变异(αj);误差引起的变异(εi(j))。六、真实验设计18(2)数据处理方法(SPSS统计软件):包含的统计变量:实验的自变量A,实验的因变量Y。预期的统计结果:自变量A的主效应是否显著,即F((P-1),P(n-1))的P值是否小于0.05。实施的统计过程:analyze—comparemeans—One-WayANOVA(3)应用举例及延伸与该设计相关的名称:随机组实验设计,独立组实验设计;下属的设计类型:实验组控制组前后测设计,实验组控制组后测设计,随机多组后测设计。(2)数据处理方法(SPSS统计软件):19(3)单因素完全随机实验设计应用举例
研究题目:文章的生字密度对学生阅读理解的影响研究假设:阅读理解随着生字密度的增加而下降实验变量:自变量——生字密度,含有4个水平(5:1、10:1、15:1、20:1)。因变量——阅读测验的分数实验设计:单因素完全随机实验设计被试:32人,随机分为四组,每组接受一个自变量处理——阅读一种生字密度的文章。数据:a1:36435752a2:46424533a3:89875676a4:988712131211思考:其他的例子?(3)单因素完全随机实验设计应用举例
研究题目:文章的生字密202.单因素随机区组实验设计(1)单因素随机区组实验设计的基本特点:适用条件:研究中有一个自变量,自变量有两个或多于两个水平;研究中还有一个无关变量,也有两个或多个水平,并且自变量的水平与无关变量的水平之间无交互作用。基本方法:首先将被试在无关变量上进行匹配,然后把各匹配组的被试随机分配给自变量的各个水平,每个被试只接受一个水平的处理。误差控制:区组法(无关变量纳入法)。通过统计处理,分离出由无关变量引起的变异,使它不出现在处理效应和误差变异中,从而提高方差分析的灵敏度。实验设计模型:Yij=μ+αj+πi+εi(j)(i=1,2,......,n;j=1,2,......,p)Yij表示被试i在水平j上的分数;μ表示总体平均数或真值;αj表示水平j的处理效应;πi表示区组效应;εi(j)表示误差变异。总变异组成:实验处理引起的变异;区组引起的变异;误差引起的变异。2.单因素随机区组实验设计(1)单因素随机区组实验设计的基本21(2)数据处理方法(SPSS统计软件):包含的统计变量:实验的自变量A,区组变量X,实验的因变量Y。实施的统计过程:analyze—GeneralLinearModel—Univariate…预期的统计结果:自变量A的主效应是否显著;无关变量即区组变量效应是否显著;若自变量主效应显著,则进行平均数多重检验。(3)应用举例及延伸与该设计相关的名称:随机化区组实验设计;下属的设计类型:随机化匹配组设计,随机化配对组设计。(2)数据处理方法(SPSS统计软件):22单因素随机区组设计应用举例研究题目:文章的生字密度对学生阅读理解的影响。研究假设:阅读理解随着生字密度的增加而下降。实验变量:自变量——生字密度,含有4个水平(5:1、10:1、15:1、20:1);因变量——阅读测验的分数;无关变量——被试的智力水平实验设计:单因素随机区组实验设计被试及程序:首先给32个学生做智力测验,并按测验分数将被试分成8个组,每组4人(智力水平相等),然后随机分配每个区组内的4个被试阅读一种生字密度的文章。数据:x1x2x3x4x5x6x7x8a1:36435752a2:46424533a3:89875676a4:988712131211思考:其他的例子?单因素随机区组设计应用举例研究题目:文章的生字密度对学生阅读233.单因素重复测量实验设计(1)单因素重复测量实验设计的基本特点:适用条件:研究中有一个自变量,自变量有两个或多于两个水平;当若干处理水平连续实施给同一被试时,被试接受前面的处理对接受后面的处理没有长期影响(如学习、记忆效应)。基本方法:实验中每个被试接受所有的处理水平。误差控制:兼作组法(重复测量法)。利用被试自己做控制,使被试的各方面特点在所有的处理中保持恒定,以最大限度控制由被试的个体差异带来的变异。但在这种设计的实验中,要注意控制顺序效应。变异来源:自变量的处理效应;被试间个体差异的效应;随机误差变异。优点:能全面控制被试变量对实验结果的影响;只需较少被试即可。(2)数据处理方法(SPSS统计软件):包含的统计变量:实验自变量A的各个处理水平:A1,A2,A3…AP实施的统计过程:analyze—GeneralLinearModel—RepeatedMeasures预期的统计结果:自变量A的主效应是否显著;不能做多重检验,但可以做两两相关t检验。(3)应用举例3.单因素重复测量实验设计(1)单因素重复测量实验设计的基本24单因素重复测量实验设计应用举例研究题目:文章的生字密度对学生阅读理解的影响。实验设计:为了更好地控制被试的个体差异对实验结果的影响,本实验采用单因素重复测量实验设计。实验变量:自变量——生字密度,含有4个水平(5:1、10:1、15:1、20:1);因变量——阅读测验的分数;被试及程序:研究者选取8名被试参加实验,每个被试阅读4篇生字密度不同的文章。为了克服疲劳效应、练习效应等顺序效应,应以拉丁方排序实施4种生字密度的文章。数据:
s1s2s3s4s5s6s7s8a1:36435752a2:46424533a3:89875676a4:988712131211单因素重复测量实验设计应用举例研究题目:文章的生字密度对学生25(二)两因素实验设计
1.两因素完全随机实验设计(1)两因素完全随机实验设计的基本特点:适用条件:研究中有两个自变量,每个自变量有两个或多于两个水平;如果一个自变量有P个水平,另一个自变量有q个水平,则实验中有p×q个处理的结合,即具体的实验条件。基本方法:把被试随机分配给各个实验处理的结合,每个被试只接受一个实验处理的结合。(注意:处理的结合而不是处理水平)误差控制:与单因素完全随机设计相同。实验设计模型:Yij=μ+αj+βk+(αβ)jk+εi(jk)(i=1,2,......,n;j=1,2,......,p;k=1,2,……,q)αj表示A因素水平j的处理效应;βk表示B因素水平k的处理效应;(αβ)jk表示水平αj与水平βk的交互作用;εi(j)表示误差变异。即:总变异由四部分组成:自变量A引起的变异;自变量B引起的变异;AB交互作用的引起的变异;误差引起的变异(εi(j))。(二)两因素实验设计
1.两因素完全随机实验设计26两因素完全随机实验设计的应用举例研究题目:文章的生字密度与主题熟悉性对学生阅读理解的影响研究假设:当文章的主题熟悉性不同时,生字密度对阅读理解有不同的影响。实验变量:自变量A——主题熟悉性,含有2个水平(熟悉的,不熟悉的);自变量B——生字密度,含有3个水平(5:1、10:1、20:1);因变量——阅读测验的分数。实验设计:两因素完全随机实验设计被试:24人实验程序:首先将自变A与B的水平结合成2×3即6个实验处理;然后把选取的被试分成6组,每组4人,分别接受一种实验处理水平的结合。如:有关春游的生字较少的文章,中等的文章和较多的文章;有关激光技术的生字较少,中等和较多的文章。模拟数据:a1b1a1b2a1b3a2b1a2b2a2b33454812667591344538123223711思考:其他两因素完全随机设计举例?两因素完全随机实验设计的应用举例研究题目:文章的生字密度与主27(4)交互作用的含义及检验思路交互作用的含义:当一个因素的水平在另一个因素的不同水平上变化趋势不同时,则这两个因素之间存在交互作用。A1A2A1A2B1B2B1B2交互作用检验思路:(1)分析两因素之间的交互作用是否显著?发现交互作用显著之后,不能停止不前,而应该进一步揭示交互作用的实质;(2)用图解法定性分析一个因素的水平在另一因素不同水平上的变化趋势;了解在什么种情况下因变量指标发生递增、递减变化,或保持不变。(3)进行简单效应检验。分析图解中每一条线所代表的变化趋势是否显著。(4)结合实验目的,对每条线所代表的心理学含义做出详细解释。(4)交互作用的含义及检验思路交互作用的含义:当一个因素的水28交互作用的具体检验方法:①图解法:首先计算出每个处理水平结合上所得到的平均数,然后以平均数作图。优点:简单、直观。缺点:主观、缺乏统计依据。思考:如果两个因素交互作用显著,那么有哪些可能的图解?如果不显著,又有哪些可能的图解?②简单效应检验法:是指分别检验一个因素在另一个因素的每一个水平上的处理效应,以便具体确定它的处理效应在另一个因素的哪个或哪些水平上是显著的,那些是不显著的。在实际研究中,以上两种方法结合使用,才能从质和量上把握交互作用的含义。SPSSforWindows下的简单效应检验程序:MANOVA因变量YBY因素A(1,p)因素B(1,q)
/DESIGN=BWITHINA(1)BWITHINA(2).MANOVA因变量YBY因素A(1,p)因素B(1,q)
/DESIGN=AWITHINB(1)AWITHINB(2).交互作用的具体检验方法:29交互作用分析实例(1)——注意在空间记忆中的作用交互作用分析实例(1)——注意在空间记忆中的作用30无需注意转移条件
需注意转移条件颜色辨别任务需注意转移和无需注意条件下的刺激流程无需注意转移条件需注意转移条件颜色辨别任务需注意转移和无31交互作用分析实例(2)——赌博成瘾者的情绪stroop效应赌博成瘾者对不同三类词颜色命名的反应时(McCusker等,1997)
交互作用分析实例(2)——赌博成瘾者的情绪stroop效32思考:(1)A、B的主效应都显著,二者是否可能存在交互作用?(2)A的主效应显著,B的主效应不显著,二者是否可能存在交互作用?(3)A、B的主效应都不显著,二者是否可能存在交互作用?(4)如果上述情况存在交互作用,那么可能的交互作用模式有哪些?
注意:在研究报告撰写时,如果两个变量之间的交互作用显著,那么只需对交互作用的含义做出详细解释,而对主效应的含义不必解释。思考:33生活中的交互作用现象举例——因材施教、众口难调、情人眼里出西施、冠军是不能选择的心理学研究中的交互作用现象举例——能力倾向研究……生活中的交互作用现象举例342.两因素混合实验设计
一个既包含非重复测量的因素(被试间因素),又包含重复测量因素(被试内因素)的实验设计,叫做混合实验设计。是现代心理与教育研究中应用最广泛的一种设计。(1)两因素混合实验设计的基本特点:适用条件:①研究中有两个自变量,每个自变量有两个或多个水平;②其中一个自变量是被试内的,即每个被试要接受他的所有水平的处理,另一个自变量是被试间的,即每个被试只接受一个水平的处理(从记忆效果和处理数过多考虑),或者它本身是一个被试变量,是每个被试独特具有,不可能同时兼备的;③研究者更感兴趣于被试内因素的处理效应以及两个因素的交互作用。基本方法:首先确定研究中的被试内变量和被试间变量,将被试随机分配给被试间变量的各个水平,然后使每个被试接受与被试间变量的某一水平结合的被试内变量的所有水平。(被试分配模式见表)误差控制:随机化法与重复测量法。优点:被试内因素的方差分析精度高,适用范围广2.两因素混合实验设计一个既包含非重复测量的因素35实验设计模型:Yij=μ+αj+βk+(αβ)jk+πi(j)+βπi(j)+εi(jk)(i=1,2,......,n;j=1,2,......,p;k=1,2,……,q)αj表示A因素水平j的处理效应;βk表示B因素水平k的处理效应;(αβ)jk表示水平αj与水平βk的交互作用;πi(j)表示嵌套在αj水平内的被试i的效应;βπi(j)表示嵌套在βk水平和被试i的交互作用中的残差;εi(j)表示误差变异。(2)数据处理方法(SPSS统计软件):统计变量:实验的自变量A、B1,B2,B3。预期结果:自变量A、B的主效应分别是否显著,A×B的交互作用是否显著,若交互作用显著,需进行简单效应检验。统计过程:analyze—GeneralLinearModel—Repeatedmeasures…(3)应用举例实验设计模型:Yij=μ+αj+βk+(αβ)jk+36两因素混合设计应用举例研究题目:文章的生字密度与主题熟悉性对学生阅读理解的影响实验设计:为了重点考察生字密度对阅读理解的影响,本实验采用2×3两因素混合实验设计。其中主题熟悉性为被试间变量,含有2个水平(熟悉的,不熟悉的);生字密度为被试内变量,含有3个水平(5:1、10:1、20:1);因变量——阅读测验的分数。被试:8人实验程序:把八名学生随机分成两组,一组学生每人阅读一篇三篇生字密度不同的、主题熟悉的文章;另一组学生每人阅读三篇生字密度不同的、主题不熟悉的文章。实验实施时,阅读三篇文章分三次进行,用拉丁方平衡学生阅读文章的先后顺序。模拟数据:见右表。
b1b2b3345a1667445
3224812a2591338123711
其他更常见的研究情境:探讨男女生,学优生、学困生,理科生、文科生等不同群体阅读能力的差异时,也可以运用类似的设计的数据模式。两因素混合设计应用举例研究题目:文章的生字密度与主题熟悉性对37两因素混合设计的简单效应检验程序MANOVAratio1ratio2ratio3BYtopic(1,2)/WSFACTORS=ratio(3)/WSDESIGN=ratio/DESIGN=MWITHINtopic(1)MWITHINtopic(2).MANOVAratio1ratio2ratio3BYtopic(1,2)/WSFACTORS=ratio(3)/WSDESIGN=MWITHINratio(1)MWITHINratio(2)MWITHINratio(3)/DESIGN=topic.两因素混合设计的简单效应检验程序383.两因素重复测量实验设计(两因素被试内设计)(1)两因素重复测量实验设计的基本特点:适用条件:①研究中有两个自变量,每个自变量有两个或多于两个水平;如果一个自变量有P个水平,另一个自变量有q个水平,则实验中有p×q个处理的结合,即具体的实验条件。②研究中的两个自变量都是被试内变量。基本方法:每个被试都接受所有的实验处理的结合。实验刺激呈现给被试的先后顺序是随机的,或按拉丁方排序的。误差控制:重复测量法。实验设计模型:Yij=μ+πi+αj+(απ)ij+βk+(βπ)jk+(αβ)jk+(αβπ)jjk+εijk(i=1,2,......,n;j=1,2,......,p;k=1,2,……,q)πi表示由被试i引起的变异,即被试间变异;(αβ)jk表示水平αj与水平βk的交互作用;(απ)ij表示αj和被试i的交互作用的残差;(βπ)jk表示βk和被试i的交互作用的残差;εi(j)表示误差变异。3.两因素重复测量实验设计(两因素被试内设计)(1)两因素重39两因素重复测量实验设计应用举例研究题目:文章的生字密度与主题熟悉性对学生阅读理解的影响实验设计:为了全面控制被试的个体差异,考虑到处理之间无显著学习效果,实验处理水平结合的数量不多,本实验采用2×3两因素的重复测量设计。所以两个自变量均为被试内变量。其中主题熟悉性有2个水平(熟悉的,不熟悉的);生字密度含有3个水平(5:1、10:1、20:1);因变量——阅读测验的分数。被试:4人实验程序:把两个自变量的水平结合成6种实验处理,即6种文章。每个被试阅读6篇文章,其中3篇生字密度不同,主题熟悉,3篇生字密度不同,主题不熟悉。为了克服疲劳和顺序效应,实验分6次进行,每个被试每次阅读一篇文章,用拉丁方平衡学生阅读文章的先后顺序。模拟数据:
a1b1a1b2a1b3a2b1a2b2a2b33454812667591344538123223711两因素重复测量实验设计应用举例研究题目:文章的生字密度与主题40两因素被试内设计的简单效应检验程序MANOVAA1B1A1B2A1B3A2B1A2B2A2B3/WSFACTORS=A(2)B(3)/WSDESIGN=BWITHINA(1)BWITHINA(2).MANOVAA1B1A1B2A1B3A2B1A2B2A2B3/WSFACTORS=A(2)B(3)/WSDESIGN=AWITHINB(1)AWITHINB(2)AWITHINB(3).两因素被试内设计的简单效应检验程序MANOVAA1B1A41(三)三因素实验设计多因素实验能使研究结果更加真实,更接近现实,从而更有价值。1.三因素完全随机实验设计(1)三因素完全随机实验设计的基本特点:适用条件:研究中有三个自变量;如果一个自变量有P个水平,另一个自变量有q个水平,第三个有r个水平,则实验中有p×q×r个处理水平的结合。基本方法:把被试随机分配给各个实验处理的结合,每个被试只接受一个实验处理的结合。误差控制:与单因素、两因素完全随机设计相同。实验设计模型:Yij=μ+αj+βk+γl+(αβ)jk+(αγ)jl+(βγ)kl+(αβγ)jkl+εi(jk)(i=1,2,......,n;j=1,2,......,p;k=1,2,……,q;l=1,2,……,r)αj、βk、γl分别为自变量A、B、C处理效应;(αβ)jk为AB的两次交互作用;(αγ)jl为AC的两次交互作用;(βγ)kl为BC的两次交互作用;(αβγ)jkl为ABC三因素的三次交互作用;εi(jk)为误差变异。(三)三因素实验设计多因素实验能使研究结果更加真实,更接近现42(2)数据处理方法(SPSS统计软件):统计变量:实验的自变量A、B,C,实验的因变量Y。预期结果:自变量A、B、C的主效应分别是否显著,A×B,A×C,B×C、A×B×C的交互作用是否显著,并对交互作用进行简单效应和简单简单效应检验。统计过程:
analyze—GeneralLinearModel—Univariate…(3)应用举例及延伸该设计思想及数据处理方法可更广泛地用于问卷、测验等调查研究。(2)数据处理方法(SPSS统计软件):43三因素完全随机实验设计的应用举例研究目的:同时探讨文章的生字密度、文章类型以及文章句子的长度对学生阅读理解的影响,以更深入研究影响阅读理解的因素。实验设计:采用2×2×2完全随机实验设计。自变量A——生字密度,含有2个水平(5:1、20:1);自变量B——文章类型,含有2个水平(说明文,记叙文);自变量C——句子的平均长度,也有两个水平(平均句长20个词,平均句长30个词);因变量——阅读测验的分数。被试:32人实验程序:首先将自变A、B、C的水平结合成2×2×2即8个实验处理;然后把选取的被试分成8组,每组4人,分别接受一种实验处理水平的结合。如:生字较少的,句子较短的说明文;生字较多的,句子较长的记叙文等。模拟数据:
三因素完全随机实验设计的应用举例研究目的:同时探讨文章的生字44a1b1c1a1b1c2a1b2c1a1b2c2a2b1c1a2b1c2a2b2c1a2b2c2S1S2S3S4S5S6S7S8S9S10S11S12S13S14S15S16S17S18S19S20S21S22S23S24
S25S26S27S28S29S30S31S32三因素完全随机设计的被试分配模式
a1b1c1a1b1c2a1b2c1a1b2c2a2b1c1a2b1c2a2b2c1a2b2c2454485912676596813454387812322376711三因素完全随机设计的数据模式a1b1c1a1b1c2a1b2c1a1b2c45(4)三因素实验设计交互作用的检验1.两次交互作用和简单效应检验当考察三因素实验中两个因素之间的交互作用时,应该忽略该两次交互作用中未涉及的一个因素,而仅考察两个因素的数据。具体方法与两因素设计实验相同,即先作交互作用图解,然后进行简单效应检验。2.三次交互作用及检验(1)含义:表现为一个因素在另外两个因素水平的结合上的处理效应,或者表现为一个因素的各个水平上,两外两个因素的交互作用。ABC交互作用图解(II)ABC交互作用图解(2)(4)三因素实验设计交互作用的检验1.两次交互作用和简单效应46(2)简单简单效应检验
简单简单效应是指一个因素在两外两个因素水平的结合上的处理效应。如图(I)。检验方法:(i)可通过条件筛选结合单因素方差分析进行显著性检验。如:当条件设为A=1&C=1时,通过单因素方差分析可检验B因素在A1C1结合上的简单简单效应。(ii)简单简单效应的检验程序:
MANOVA因变量YBY自变量A(1,2)B(1,2)C(1,2)/DESIGN=BWITHINA(1)WITHINC(1)BWITHINA(1)WITHINC(2)BWITHINA(2)WITHINC(1)BWITHINA(2)WITHINC(2).(3)简单交互作用检验
简单交互作用是指在一个因素的各个水平上,另外两个因素的交互作用。如图解(II)所示。可通过条件筛选结合两因素的方差分析检验其显著性。如:当条件设为B=1时,通过B×C的两因素方差分析,可检验在B1水平上,BC两因素的简单交互作用;当条件设为B=2时,通过B×C的两因素方差分析,可检验在B2水平上,BC两因素的简单交互作用。(2)简单简单效应检验472.三因素混合设计三因素混合设计具体包括两种情况:(1)重复测量一个因素的三因素实验设计;(2)重复测量两个因素的三因素实验设计。二者的区别在被试内因素的数量。注意:不同设计的数据模式。3.三因素被试内实验设计三个自变量都是被试内因素的设计。2.三因素混合设计48三因素被试内设计举例——注意警觉、注意定向和注意控制的交互关系(BrainandCognition,2004,54,225–227)三因素被试内设计举例——注意警觉、注意定向和注意控制的交互关49三个因素的主效应均显著:警戒条件、有效线索化条件和一致条件下的反应时更快。警戒与一致性的交互作用显著:在有警戒声音时,比无警戒声音时出现了更大的一致性效应。线索化和一致性的交互作用也显著:在无效线索化时,比有效线索化和无线索时出现了更大的一致性效应。警戒和线索的交互作用也显著:有警戒时的线索化效应大于无警戒时的线索化效应。三个因素的主效应均显著:警戒条件、有效线索化条件和一致条件下50(四)含有协变量的实验设计1.协变量协变量是指无法事先通过实验设计进行直接控制的,与自变量无关,但又影响实验结果的连续变量(数量因子)。协变量有三种存在情况:(1)事先知道,但无法控制;(2)事先不了解,只有经事后检验才知道;(3)事先根本不存在,只在实验进行过程中产生。例:教法实验中的智力、复习时间、学习成绩因素;中、美被试视优效应研究中的听力测验正确率;独生与非独生儿童认知能力研究中的父亲文化水平因素;生物学上,饲料对猪催肥效果研究中的初始重量;医学上,不同州妇女血清中胆固醇浓度研究中的年龄因素。2.协方差分析(1)协方差分析的的基本思想:根据因变量对协变量的回归系数从因变量中扣除受协变量影响的部分,从而正确分析自变量对因变量的影响。因此,协方差分析是建立在方差分析和回归分析基础上的一种统计分析方法。方差分析所研究的问题是考察一个或几个因子的不同水平对实验指标的影响,即从质量因子的角度探讨各水平的不同效果。一般来说,是可控的。
回归分析所研究的问题是考察实验指标与一个或几个因子见是否存在线性或非线性关系,并试图建立两者的数量关系式,即从数量因子的角度去研究问题。但数量因子有时是不能人为加以控制的。这种不能加以控制的数量因子就是协变量。(四)含有协变量的实验设计1.协变量51(2)协方差分析的基本过程
①对因变量与协变量各自的平方和以及它们的总积差和进行分解。②计算回归线的斜率并进行调整后检验。具体包含以下步骤:计算每条回归线的斜率(自变量有几个水平,就有几条回归线);计算共同回归线的斜率;回归系数的同质性检验(只有当F不显著时,才能进一步做协方差分析;若显著说明协变量与自变量有关,需采用“詹森-内曼奋法”分析);调整后处理均方的显著性检验;调整后处理平均数之间的比较检验。(3)协方差分析的计算机处理步骤(SPSS)①回归斜率同质性检验:Univariate——Model(Custom:自变量a,协变量x,及a*x)——OK。在输出结果中观察自变量与协变量的交互作用是否显著,若F<0.05,则进一步进行协方差分析。②实施协方差分析:Univariate——Model(Fullfactorial)——Option(选择自变量进入Displayformeans,并点击Comparemaineffect,Descriptivestatistics,Estimatedeffectsize,Observedpower,Homogeitytests,ParameterEstimates等选项)——OK。观察结果中自变量的主效应、回归系数、实际平均数与调整后平均数的差别、以及调整后平均数多重检验的结果。③整理统计结果:从结果文件中,选取同质性检验,自变量处理效应,事后多重比较结果等内容。3.含有协变量的实验设计及应用举例不是一种独立的设计类型。它可以与各种单因素与多因素实验设计相结合,也可以与准实验设计相结合(更必要)。常用的有:独立组单因素单协变量设计,单因素双协变量设计,两因素单协变量设计,两因素双协变量设计等。(2)协方差分析的基本过程①对因变量与协变量各自的平方和52含有协变量的实验设计应用举例研究题目:三种不同学习策略训练效果的研究研究设计:完全随机的单因素单协变量实验设计。自变量为学习策略类型,有三个水平:复述策略,组织策略和精加工策略。因变量为记忆成绩。协变量为被试的学习态度,以一般态度测验结果为指标。研究被试:24人实验程序:在训练开始之前,对全体被试实施一般态度测验,记录其测验分数。然后把被试随机分成三组,每组接受一种策略训练。训练持续一个月后进行训练效果测验。模拟数据:
A1z11513111212161417y18583657680918490A2z21716181821221918y29790100951031069994
A3z32224202325273032y389918395100102105110含有协变量的实验设计应用举例研究题目:三种不同学习策略训练效53(五)基于项目的方差分析1.实验单位
问题:一个实验中为什么需要多个被试,同一条件需要多个刺激?实验单位就是指实验研究中的对象,通常就是指实验中的被试。是实验中不可或缺的因素。作用:取样单位、测量单位、统计分析单位。(1)以被试作为实验单位被试是指符合特定研究总体特征的个体,也叫样本的个案(case)。(2)以项目作为实验单位:——前提:项目必须是随机取样的把每一个实验材料或刺激作为实验单位,如每个单词或图形。实验材料也可以作为实验的取样单位、测量单位和统计分析单位。以被试为统计单位得到的平均数和标准差反映了一组被试在某一实验处理上的集中趋势和离中趋势;把项目作为统计单位,计算所得到的平均数和标准差则反映了一组项目在某一实验处理上的集中趋势和离中趋势。(五)基于项目的方差分析1.实验单位54例4名被试在同一处理水平(如高频)5个单词上的反应时,可得到20个观测值。
word1word2word3word4word5Subject1423456398418452Subject2386457407434425Subject3432419416387440Subject4435418384468424
若基于被试,则将每个被试在5项目上的RT求平均,得到4个平均数若基于项目,则将4个被试在每个项目上的数据平均,得到5个平均数前4个平均数反映了被试的个体差异;后5个平均数反映项目间的个体差异例4名被试在同一处理水平(如高频)5个单词上的反应时,可得552.基于项目的实验设计实验设计是指对实验单位进行抽样并把它分配到不同实验处理的过程或模式。同一个研究既是基于被试的设计,又是基于项目的设计。
基于项目的实验设计是对项目进行分组,实验处理针对的是同一组或不同组的项目。也可分为组间设计和组内设计,即项目间设计和项目内设计。每一个自变量水平或处理的结合形成一个项目组。这两种设计的方差分析也不同。例:8名被试对高频和低频各5个单词做命名反应,考察词频对命名速度的影响—基于被试的设计:被试内设计—基于项目的设计:判断依据是两组刺激如何选定。若通过匹配法选定,则属于项目内设计;若刺激材料是随机选择,则属于项目间设计。2.基于项目的实验设计563.基于项目的方差分析基于项目的方差分析在具体计算方法与基于被试的方差分析相似。关键在于统计分析单元不同。后者是被试,而前者是实验材料,即项目。现在很多研究中开始同时报告这两种方差分析的结果。
——先做常规的方差分析(基于被试),再做基于项目的方差分析。
如:F1(2,28)=8.02,P<0.01;F2(2,32)=7.35,P<0.01基于项目方差分析的步骤:
1.按常规方差分析要求输入原始数据;
2.用Data菜单中的Transpose命令使原始数据做90度旋转,使被试成为变量,每个刺激项目作为case;
3.然后按常规方差分析命令进行分析3.基于项目的方差分析57三、准实验设计准实验设计是指在实际的社会情境中,不能用真正的实验设计来控制无关变量,但可以对一些影响实验结果的无关变量进行分类,将其作为自变量纳入,使用真实验设计的某些方法搜集、整理、统计分析实验材料的设计方法(孟庆茂等,2000)。其关键特征为:缺乏随机化。适用条件:(1)以事先存在的被试组为研究对象;(2)被试不宜或无法随机分派到各实验处理欧美分类方法:事后研究(ExPostFactoStudies),纵向设计(LongitudinalDesigns),横向设计(Cross-SectionalStudies),前后测设计(Pretest/PosttestDesign)三、准实验设计准实验设计是指在实际的社会情境中,不能用真正的58(一)单组准实验设计1.时间序列设计时间序列设计是指对一组非随机取样的被试实施实验处理,并在实验处理前后周期性地做一系列测量,然后分析前后测量是否具有连续性,从而推断实验处理的效果的设计方法。(1)其设计模式为:一系列前测
→
实验处理
→
一系列后测;也可表示为:O1
O2
O3
O4
X
O5
O6
O7
O8时间序列设计的可能结果如下图所示。图A中前后测量结果基本上都是连续的,表明实验处理无效;B图中前后测量结果不连续,表明实验处理有效,其中,第一种情况有稳定的正效应,第二种有短暂的作用,第三种有负效应。考察重点为总体趋向,而非某一段的局部特征。(一)单组准实验设计591思考:这种设计中主要的误差来源有什么?(2)优点:由于采用了一系列前测,时间序列设计对于成熟、历史、测验效应以及统计回归效应均有一定程度的控制。缺点:无控制组,测验与处理可能有交互作用,练习或疲劳效应。(3)统计方法:实验结果一般采用t检验进行考察。也可通过回归直线的差异检验进行(斜率、截距、残差)。
2.相等时间样本设计相等时间样本设计:是一种在没有控制组的情况下,对两种实验条件的效果进行比较的方法。具体做法为:对一组被试抽取两个相等的时间样本,前一个时间样本里出现实验变量,而在后一个时间样本中不出现实验变量的设计方法。(1)其基本模式如下:
处理→测O1无处理→测O2处理→测O3无处理→测O4(2)优点:相等时间样本通过比较多次测量的差异,可检验实验处理的效果并分析实验安排的顺序效应;可有效控制历史因素的影响及整个内部效度。
缺点:外部效度不高(练习效应、疲劳效应、被试选择偏差与实验变量的交互作用,实验安排的反作用)。它一般适用于一次实验处理对被试序列、行为只有暂时影响的研究。(3)统计分析:T检验或简单效应检验。批作业X1O1O3O5不批作业X0O2O4O61思考60(二)多组准实验设计
1.不相等实验组控制组前后测设计(1)这种设计的基本模式如下:
实验组:前测O1→实验处理(X)→
后测O2控制组:前测O3—————→
后测O4在不相等控制组前后测设计中被试不是随机抽取的,只是采用原有的静态的自然组,实验组和控制组之间可能存在选择偏差。(2)优缺点:由于这种设计采用了控制组和前后测,因此能有效控制历史、成熟、测验等因素。但是,由于该设计没有采用随机化法分配被试或实验处理,实验组与控制组是不对等的,因此,研究结果不能推广到对等和无前测的情境中。(3)统计检验:这种设计一般采用独立样本的t检验或协方差分析,通过将两组前后测的分数变化进行比较,从而估计出实验处理的效果;也可采用非参数检验法进行,如曼-惠特尼U检验。(二)多组准实验设计1.不相等实验组控制组前后测设计612.不相等实验组控制组前后测时间序列设计(1)设计的基本模式为:实验组:一系列前测→实验处理→一系列后测控制组:一系列前测—————→一系列后测也可表示为:O1
O2
O3
O4
X
O5
O6
O7
O8O9
O10
O11
O12
O13
O14
O15
O16(2)评价:这种设计既采用了序列前后测又设置了非随机分配的控制组,能更好地控制成熟和历史的因素,而且测验的练习效应和敏感性也得到有效的平衡和控制。但测验的反作用效果,被试选择偏差与实验处理的交互作用仍可能影响该设计的外部效度。(3)统计检验:T检验或直线回归方程检验。(4)应用举例:
2.不相等实验组控制组前后测时间序列设计62不相等实验组控制组前后测时间序列设计应用举例
一位教三个班的初一数学教师用这种设计做了一项关于不同反馈类型对代数成绩影响的研究。在一个学期中,这位老师进行了5次同等难度的持续一小时代数测验。尽管随着教学的进展,这些测验涵盖了不同的教学内容,但因为她精心采用了难度水平大致相等的题目设计试卷,因而每次测验具有大体相同的难度。在第2次和第3次测验之间,她给1班以正反馈(X1);给2班以负反馈(X2),对第3班不做任何反馈(控制处理)。这项实验的图解如下:
班级反馈类型(自变量)1班O1—O2—X1—O3—O4—O5代数测试2班O6—O7—X2—O8—O9—O10得分
3班O11—O12——O13—O14—O15(因变量)
——教学时间:1学期——
不相等实验组控制组前后测时间序列设计应用举例6313.分解样本前后测设计这种设计的基本形式如下A组:前测O1→实验处理→后测O2被试
B组:前测O3→实验处理→后测O4这种设计实际上是将非实验设计的单组前后测设计进行两遍,适合于不能一次使所有被试都接受处理、但要求最终所有被试都接受处理的情况。4.修补设计修补设计实际上是将两个不同的非实验设计结合在一起。其基本形式为:A组:实验处理—→后测O1B组:前测O2→实验处理→后测O3
13.分解样本前后测设计64四、非实验设计
(一)国外对非实验设计的看法非实验设计就是不用实验作为研究手段的研究设计。具体方法有:1.现象学方法(phenomenology),是指对自己的直接经验进行描述的方法。局限:(1)不能比较不同条件下被试的数据,因此不能得出因果关系的结论;(2)对自身心理活动的关注可能会改变正常的心理活动;(3)其结论不一定完全精确、客观,而且其研究结果不能推广到别人身上。2.个案研究法(casestudy),是指对他人的行为经验进行描述、记录的方法。常用于临床心理、特殊心理的系统研究。3.现场研究法(fieldstudy),在现实情境中进行的研究。常用于研究在实验中看不见的心理和行为。4.调查研究法(surveyresearch),包括问卷法和访谈法。经常与其他方法结合使用,也可以独立使用。四、非实验设计(一)国外对非实验设计的看法65(二)国内对非实验设计的看法
非实验设计是最为原始的实验设计,它是一种对任何无关变量都没有控制的。实验设计。基本类型有:1.单组后测设计是对一组被试实施实验处理,然后再对其进行观测,以评价实验处理的效果。其基本模式为:X——O,X表示研究者操纵的自变量或研究者经过分析而推断的自变量。O表示后测成绩。非实验设计方法与其说提供了一种研究策略,不如说是启发了一种评价研究结论可靠性角度,使我们能更理性地接受各种现实生活中和研究中的结论。
2.单组前后测设计在实验处理之前增加了一次前测,通过前测可以获得所抽取样本的最初水平或心理特征,再与单组后测结果进行比较,以分析实验处理的效应。其基本模式为:O1——X——O2。O1为前测成绩,作为基线观测值;X为实验处理;O2为实施处理X后的测验成绩。优点:可比较处理前后的效果;全体被试既做实验组又做控制组,有利于控制被试的个体差异。单组前后测设计(包括时间序列设计)也是被试内设计的一种。局限:讨论可能存在哪些误差?经历、成熟、测验敏感性、统计回归、测验与处理的交互作用成熟因素是指在前后测的时间间隔中,被试的某种特点会有某种自然的变化,如生理,心理的变化等。测量敏感作用来自于相同被试进行重复同样的测量,被试有了前测的经验,对后测可能有一定的影响。统计检验方法:相关样本T检验;非参数的符号检验;非参数的符号秩次检验(FWilcoxon)。
(二)国内对非实验设计的看法非实验设计是最为原始的实验设计663.固定组比较设计该设计除了接受实验处理的实验组外,另外设置了一个不接受实验处理的控制组。其基本模式为:
实验组:XO1
控制组:
O2优点:可比较有无实验处理的不同效果;可在一定程度上控制历史、成熟和统计回归等无关因素。局限:在这种设计中,实验组与控制组被试的选取和分配不是随机的(选择偏差),存在选择与成熟的交互作用,选择与处理的交互作用,而且没有前测。因此也不能肯定地将实验组和控制组后测的差异归因于实验处理。4.事后回溯设计是指研究者不需要设计实验处理或控制自变量,将以自然发生的处理或自变量与某种结果或因变量联系起来加以考虑,从而二者之间关系的方法。这是一种由果溯因的研究。包含相关研究和准则组设计两种。参见朱滢P54-55。3.固定组比较设计该设计除了接受实验处理的实验组外,另外设置67第四节
心理实验研究的效度1957,社会心理学家Campbell第一次明确提出实验研究的效度问题。1966,借用测验领域的“效度”概念,提出外部效度(externalvalidity)与内部效度(internalvalidity)的概念,作为设计与评价各种研究的标准。1979,Campbell&Cook从外部效度中分离出构思效度(constructvalidity),从内部效度中分离出统计结论效度(statisticalconclusionvalidity)。效度:是指研究真实、正确地揭示所研究心理现象的本质及其规律的程度,也就是研究结果符合事物客观实际的程度。
主要有构思效度、外部效度、内部效度和统计结论
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 果园场地使用权转让合同范本
- 正确消毒方法外科护理
- 20叶圣陶批改作文的七大法则【基于智能测评的中小学学科作文教学】PDF版论文集
- 《电路稳态分析》课件
- 16《赤壁赋》《我与地坛》联读逐字稿(教学实录)统编版高中语文必修上册
- 2024年电磁传感器项目资金申请报告代可行性研究报告
- 改善医疗服务
- 健康体检设备项目建设规划投资计划书
- 年产xx及全球角磨机项目可行性研究报告(项目规划)
- 年产xx冲压件封头项目建议书
- 四年级上册英语试题Module 8 练习(含答案)外研版(一起)
- 深圳市环境卫生质量标准
- 消防栓点检记录表(样表)
- (完整ppt)隧道施工方法课件
- 失禁性皮炎的护理--PPT课件
- 2002年挑战杯作品文集 (65)
- 控压钻井技术及实践(装备与实例)课件
- 贵州省农村义务教育阶段学校特设岗位教师聘任合同书说明...~(doc)-下载
- 无陪护病房实施方案计划
- 合作社档案管理制度管理办法
- 合成车间及甲类仓库泄爆墙施工方案RE
评论
0/150
提交评论