检验有单样本t检验_第1页
检验有单样本t检验_第2页
检验有单样本t检验_第3页
检验有单样本t检验_第4页
检验有单样本t检验_第5页
已阅读5页,还剩12页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

检验有单样本t检验

1.检验有单样本t检验,配对t检验和两样本t检验。

2.单样本t检验:是用样本均数代表的未知总体均数和已知总体均数进行比较,来观

察此组样本与总体的差异性。

3.配对t检验:是采用配对设计方法观察以下几种情形,1,两个同质受试对象分别接

受两种不同的处理:2,同一受试对象接受两种不同的处理;3,同一受试对象处理前后。

4.F检验又叫方差齐性检验。在两样本t检验中要用到F检验。从两研究总体中随机

抽取样本,要对这两个样本进行比较的时候,首先要判断两总体方差是否相同,即方差齐

性。若两总体方差相等,则直接用t检验,若不等,可采用t'检验或变量变换或秩和检验

等方法。其中要判断两总体方差是否相等,就可以用F检验。2.t检验和方差分析的前

提条件及应用误区用于比较均值的t检验可以分成三类,第•类是针对单组设计定量资料

的;第二类是针对配对设计定量资料的;第三类则是针对成组设计定量资料的。后两种设

计类型的区别在于事先是否将两组研究对象按照某一个或几个方面的特征相似配成对子。

无论哪种类型的t检验,都必须在满足特定的前提条件下应用才是合理的。若是单组设

计,必须给出一个标准值或总体均值,同时,提供一组定量的观测结果,应用t检验的前

提条件就是该组资料必须服从正态分布;若是配对设计,每对数据的差值必须服从正态分

布;若是成组设计,个体之间相互独立,两组资料均取自正态分布的总体,并满足方差齐

性。之所以需要这些前提条件,是因为必须在这样的前提下所计算出的t统计量才服从t

分布,而t检验正是以t分布作为其理论依据的检验方法。值得注意的是,方差分析与

成组设计t检验的前提条件是相同的,即正态性和方差齐性。

5.t检验是目前医学研究中使用频率最高,医学论文中最常见到的处理定量资料的假设

检验方法。t检验得到如此广泛的应用,究其原因,不外乎以下几点:现有的医学期刊多

在统计学方面作出了要求,研究结论需要统计学支持;传统的医学统计教学都把t检验作

为假设检验的入门方法进行介绍,使之成为广大医学研究人员最熟悉的方法;t检验方法

简单,其结果便于解释。简单、熟悉加上外界的要求,促成了t检验的流行。但是,由于

某些人对该方法理解得不全面,导致在应用过程中出现不少问题,有些甚至是非常严重的

错误,直接影响到结论的可靠性。将这些问题归类,可大致概括为以下两种情况:不考虑

t检验的应用前提,对两组的比较一律用t检验;将各种实验设计类型一律视为多个单因

素两水平设计,多次用t检验进行均值之间的两两比较。以上两种情况,均不同程度地增

加了得出错误结论的风险。而且,在实验因素的个数大于等于2时,无法研究实验因素之

间的交互作用的大小。

CSDNJM

资讯

论匕

博客

卜战

搜索

目录视图

摘要视图

订阅

安装Chrome浏览器下载资源送30个下载分!2011中国移动开发者大会门票超低价团

购!2011移动开发者大会亮点之二:七大论坛神秘嘉宾闪亮登场!提交原创APP,20万

等你赢

t检验与F检验/统计常识/统计学笔记(2)一随机抽样与统计推断的逻辑

2008-05-0421:296581人阅读评论(2)收藏举报

bT检验和F检验的由来

一般而言,为了确定从样本(sample)统计结果推论至总体时所犯错的概率,我们会利用

统计学家所开发的一些统计方法,进行统计检定。

通过把所得到的统计检定值,与统计学家建立了一些随机变量的概率分布(probability

distribution)进行比较,我们可以知道在多少%的机会下会得到目前的结果。倘若经比较

后发现,出现这结果的机率很少,亦即是说,是在机会很少、很罕有的情况下才出现;那

我们便可以有信心的说,这不是巧合,是具有统计学上的意义的(用统计学的话讲,就是

能够拒绝虚无假设nullhypothesis,Ho)«相反,若比较后发现,出现的机率很高,并不

罕见;那我们便不能很有信心的直指这不是巧合,也许是巧合,也许不是,但我们没能确

定。

F值和t值就是这些统计检定值,与它们相对应的概率分布,就是F分布和t分布。统

计显著性(sig)就是出现目前样本这结果的机率。

2,统计学意义(P值或sig值)

结果的统计学意义是结果真实程度(能够代表总体)的一种估计方法。专业上,P值为

结果可信程度的一个递减指标,P值越大,我们越不能认为样本中变量的关联是总体中各

变量关联的可靠指标。P值是将观察结果认为有效即具有总体代表性的犯错概率。如

P=0.05提示样本中变量关联有5%的可能是由于偶然性造成的。即假设总体中任意变量间

均无关联,我们重复类似实验,会发现约20个实验中有一个实验,我们所研究的变量关

联将等于或强于我们的实验结果。(这并不是说如果变量间存在关联,我们可得到5%或

95%次数的相同结果,当总体中的变量存在关联,重复研究和发现关联的可能性与设计的

统计学效力有关。)在许多研究领域,0.05的p值通常被认为是可接受错误的边界水平。

3,T检验和F检验

至於具体要检定的内容,须看你是在做哪一个统计程序。

举一个例子,比如,你要检验两独立样本均数差异是否能推论至总体,而行的t检验。

两样本(如某班男生和女生)某变量(如身高)的均数并不相同,但这差别是否能推论至总

体,代表总体的情况也是存在著差异呢?

会不会总体中男女生根本没有差别,只不过是你那麽巧抽到这2样本的数值不同?为

此,我们进行t检定,算出•个t检定值。

与统计学家建立的以「总体中没差别」作基础的随机变量t分布进行比较,看看在多

少%的机会(亦即显著性sig值)下会得到目前的结果。

若显著性sig值很少,比如<0.05(少於5%机率),亦即是说,「如果」总体「真的」没

有差别,那麽就只有在机会很少(5%)、很罕有的情况下,才会出现目前这样本的情况。虽

然还是有5%机会出错(1-0.05=5%),但我们还是可以「比较有信心」的说:目前样本中这

情况(男女生出现差异的情况)不是巧合,是具统计学意义的,「总体中男女生不存差异」

的虚无假设应予拒绝,简言之,总体应该存在著差异。

每一种统计方法的检定的内容都不相同,同样是t-检定,可能是上述的检定总体中是否

存在差异,也同能是检定总体中的单一值是否等於0或者等於某一•个数值。

至於F-检定,方差分析(或译变异数分析,AnalysisofVariance),它的原理大致也是

上面说的,但它是透过检视变量的方差而进行的。它主要用于:均数差别的显著性检验、

分离各有关因素并估计其对总变异的作用、分析因素间的交互作用、方差齐性(Equality

ofVariances)检验等情况。

4,T检验和F检验的关系

t检验过程,是对两样本均数(mean)差别的显著性进行检验。惟t检验须知道两个总体

的方差(Variances)是否相等;t检验值的计算会因方差是否相等而有所不同。也就是说,

t检验须视乎方差齐性(EqualityofVariances)结果。所以,SPSS在进行t-testfor

EqualityofMeans的同时,也要做Levene'sTestforEqualityofVariances。

1.

在Levene'sTestforEqualityofVariances—栏中F值为2.36,Sig.为.128,表

示方差齐性检验「没有显著差异」,即两方差齐(EqualVariances),故下面t检验的结

果表中要看第一排的数据,亦即方差齐的情况下的t检验的结果。

2.

在t-testforEqualityofMeans中,第一排(Variances=Equal)的情况:t=8.892,

df=84,2-TailSig=.000,MeanDifference=22.99

既然Sig=.000,亦即,两样本均数差别有显著性意义!

3.

到底看哪个Levene'sTestforEqualityofVariances一栏中sig,还是看t-test

forEqualityofMeans中那个Sig.(2-tailed)啊?

答案是:两个都要看。

先看Levene'sTestforEqualityofVariances,如果方差齐性检验「没有显著差

异」,即两方差齐(EqualVariances),故接著的t检验的结果表中要看第一排的数据,

亦即方差齐的情况下的t检验的结果。

反之,如果方差齐性检验「有显著差异」,即两方差不齐(UnequalVariances),故接

著的t检验的结果表中要看第二排的数据,亦即方差不齐的情况下的t检验的结果。

4.

你做的是T检验,为什么会有F值呢?

就是因为要评估两个总体的方差(Variances)是否相等,要做Levene'sTestfor

EqualityofVariances,要检验方差,故所以就有F值。

另•种解释:

t检验有单样本t检验,配对t检验和两样本t检验。

单样本t检验:是用样本均数代表的未知总体均数和已知总体均数进行比较,来观察此

组样本与总体的差异性。

配对t检验:是采用配对设计方法观察以下几种情形,1,两个同质受试对象分别接受

两种不同的处理;2,同一受试对象接受两种不同的处理;3,同一受试对象处理前后。F

检验又叫方差齐性检验。在两样本t检验中要用到F检验。

从两研究总体中随机抽取样本,要对这两个样本进行比较的时候,首先要判断两总体方

差是否相同,即方差齐性。若两总体方差相等,则直接用t检验,若不等,可采用t'检验

或变量变换或秩和检验等方法。

其中要判断两总体方差是否相等,就可以用F检验。

若是单组设计,必须给出-个标准值或总体均值,同时,提供一组定量的观测结果,应

用t检验的前提条件就是该组资料必须服从正态分布;若是配对设计,每对数据的差值必

须服从正态分布;若是成组设计,个体之间相互独立,两组资料均取自正态分布的总体,

并满足方差齐性。之所以需要这些前提条件,是因为必须在这样的前提下所计算出的t统

计量才服从t分布,而t检验正是以t分布作为其理论依据的检验方法。

简单来说就是实用T检验是有条件的,其中之一就是要符合方差齐次性,这点需要F检

验来验证。

1、问:自由度是什么?怎样确定?

答:(定义)构成样本统计量的独立的样本观测值的数目或自由变动的样本观测值的数

目。用df表示。

自由度的设定是出于这样一个理由:在总体平均数未知时,用样本平均数去计算离差

(常用小s)会受到一个限制——要计算标准差(小s)就必须先知道样本平均数,而样

本平均数和n都知道的情况下,数据的总和就是一个常数了。所以,“最后一个”样本数

据就不可以变了,因为它要是变,总和就变了,而这是不允许的。至于有的自由度是n—2

什么的,都是同样道理。

在计算作为估计量的统计量时,引进一个统计量就会失去一个自由度。

通俗点说,一个班上有50个人,我们知道他们语文成绩平均分为80,现在只需要知道

49个人的成绩就能推断巾剩下那个人的成绩。你可以随便报出49个人的成绩,但是最后

一个人的你不能瞎说,因为平均分已经固定下来了,自由度少个了。

简单点就好比你有一百块,这是固定的,已知的,假设你打算买五件东西,那么前四件

你可以随便买你想买的东西,只要还有钱的话,比如说你可以吃KFC可以买笔,可以买衣

服,这些花去的钱数目不等,当你只剩2块钱时,或许你最多只能买一瓶可乐了,当然也

可以买一个肉松蛋卷,但无论怎么花,你都只有两块钱,而这在你花去98块那时就已经

定下来了。(这个例子举的真不错!!)

2、问:X方检验中自由度问题

答:在正态分布检验中,这里的M(三个统计量)为N(总数)、平均数和标准差。

因为我们在做正态检验时,要使用到平均数和标准差以确定该正态分布形态,此外,要

计算出各个区间的理论次数,我们还需要使用到N。

所以在正态分布检验中,自由度为K-3。(这一条比较特别,要记住!)

在总体分布的配合度检验中,自由度为K—1。

在交叉表的独立性检验和同质性检验中,自由度为(r-1)X(c-1)»

3、问:t检验和方差分析有何区别答:t检验适用于两个变量均数间的差异检验,多于

两个变量间的均数比较要用方差分析。用于比较均值的t检验可以分成三类,第一类是

针对单组设计定量资料的;第二类是针对配对设计定量资料的;第三类则是针对成组设计

定量资料的。后两种设计类型的区别在于事先是否将两组研究对象按照某一个或儿个方面

的特征相似配成对子。无论哪种类型的t检验,都必须在满足特定的前提条件下应用才是

合理的。

若是单组设计,必须给出一个标准值或总体均值,同时,提供一组定量的观测结果,应

用t检验的前提条件就是该组资料必须服从正态分布;若是配对设计,每对数据的差值必

须服从正态分布;若是成组设计,个体之间相互独立,两组资料均取自正态分布的总体,

并满足方差齐性。之所以需要这些前提条件,是因为必须在这样的前提下所计算出的t统

计量才服从t分布,而t检验正是以t分布作为其理论依据的检验方法。

值得注意的是,方差分析与成组设计t检验的前提条件是相同的,即正态性和方差齐

性。t检验是目前医学研究中使用频率最高,医学论文中最常见到的处理定量资料的假设

检验方法。t检验得到如此广泛的应用,究其原因,不外乎以下几点:现有的医学期刊多

在统计学方面作出了要求,研究结论需要统计学支持;传统的医学统计教学都把t检验作

为假设检验的入门方法进行介绍,使之成为广大医学研究人员最熟悉的方法;t检验方法

简单,其结果便于解释。简单、熟悉加上外界的要求,促成了t检验的流行。但是,由于

某些人对该方法理解得不全面,导致在应用过程中出现不少问题,有些甚至是非常严重的

错误,直接影响到结论的可靠性。将这些问题归类,可大致概括为以下两种情况:不考虑

t检验的应用前提,对两组的比较一律用t检验;将各种实验设计类型一律视为多个单因

素两水平设计,多次用t检验进行均值之间的两两比较。以上两种情况,均不同程度地增

加了得出错误结论的风险。而且,在实验因素的个数大于等于2时,无法研究实验因素之

间的交互作用的大小。

问:统计学意义(P值)

答:结果的统计学意义是结果真实程度(能够代表总体)的一种估计方法。专业上,P

值为结果可信程度的一个递减指标,P值越大,我们越不能认为样本中变量的关联是总体

中各变量关联的可靠指标。P值是将观察结果认为有效即具有总体代表性的犯错概率。如

P=0.05提示样本中变量关联有5%的可能是由于偶然性造成的。即假设总体中任意变量间

均无关联,我们重复类似实验,会发现约20个实验中有一个实验,我们所研究的变量关

联将等于或强于我们的实验结果。(这并不是说如果变量间存在关联,我们可得到5%或

95%次数的相同结果,当总体中的变量存在关联,重复研究和发现关联的可能性与设计的

统计学效力有关。)在许多研究领域,0.05的P值通常被认为是可接受错误的边界水平。

4、问:如何判定结果具有真实的显著性

答:在最后结论中判断什么样的显著性水平具有统计学意义,不可避免地带有武断性。

换句话说,认为结果无效而被拒绝接受的水平的选择具有武断性。实践中,最后的决定通

常依赖于数据集比较和分析过程中结果是先验性还是仅仅为均数之间的两两》比较,依赖

于总体数据集里结论一致的支持性证据的数量,依赖于以往该研究领域的惯例。通常,许

多的科学领域中产生P值的结果W0.05被认为是统计学意义的边界线,但是这显著性水平

还包含了相当高的犯错可能性。结果0.052P>0.01被认为是具有统计学意义,而

0.01>P>0.001被认为具有高度统计学意义。但要注意这种分类仅仅是研究基础上非正规

的判断常规。

5、问:所有的检验统计都是正态分布的吗?

答:并不完全如此,但大多数检验都直接或间接与之有关,可以从正态分布中推导出

来,如t检验、F检验或卡方检验。这些检验一般都要求:所分析变量在总体中呈正态分

布,即满足所谓的正态假设。许多观察变量的确是呈正态分布的,这也是正态分布是现实

世界的基本特征的原因。当人们用在正态分布基础上建立的检验分析非正态分布变量的数

据时问题就产生了,(参阅非参数和方差分析的正态性检验)。这种条件下有两种方法:

一是用替代的非参数检验(即无分布性检验),但这种方法不方便,因为从它所提供的结

论形式看,这种方法统计效率低下、不灵活•。另一种方法是:当确定样本量足够大的情况

下,通常还是可以使用基于正态分布前提下的检验。后一种方法是基于一个相当重要的原

则产生的,该原则对正态方程基础上的总体检验有极其重要的作用。即,随着样本量的增

加,样本分布形状趋于正态,即使所研究的变量分布并不呈正态。

6、问:假设检验的内涵及步骤

答:在假设检验中,由于随机性我们可能在决策上犯两类错误,一类是假设正确,但我

们拒绝了假设,这类错误是“弃真”错误,被称为第一类错误;一类是假设不正确,但我

们没拒绝假设,这类错误是“取伪”错误,被称为第二类错误。一般来说,在样本确定的

情况下,任何决策无法同时避免两类错误的发生,即在避免第一类错误发生机率的同时,

会增大第二类错误发生的机率;或者在避免第二类错误发生机率的同时,会增大第•类错

误发生的机率。人们往往根据需要选择对那类错误进行控制,以减少发生这类错误的机

率。大多数情况下,人们会控制第一类错误发生的概率。发生第一类错误的概率被称作

显著性水平,一般用a表示,在进行假设检验时,是通过事先给定显著性水平a的值而

来控制第一类错误发生的概率。在这个前提下,假设检验按下列步骤进行:

1)、确定假设;

2)、进行抽样,得到一定的数据;

3)、根据假设条件下,构造检验统计量,并根据抽样得到的数据计算检验统计量在这

次抽样中的具体值;

4)、依据所构造的检验统计量的抽样分布,和给定的显著性水平,确定拒绝域及其临

界值;

5)、比较这次抽样中检验统计量的值与临界值的大小,如果检验统计量的值在拒绝域

内,则拒绝假设;

到这一步,假设检验已经基本完成,但是由于检验是利用事先给定显著性水平的方法来

控制犯错概率的,所以对于两个数据比较相近的假设检验,我们无法知道那一个假设更容

易犯错,即我们通过这种方法只能知道根据这次抽样而犯第一类错误的最大概率(即给定

的显著性水平),而无法知道具体在多大概率水平上犯错。计算P值有效的解决了这个问

题,P值其实就是按照抽样分布计算的一个概率值,这个值是根据检验统计量计算出来

的。通过直接比较P值与给定的显著性水平a的大小就可以知道是否拒绝假设,显然这

就代替了比较检验统计量的值与临界值的大小的方法。而且通过这种方法,我们还可以知

道在P值小于a的情况下犯第一类错误的实际概率是多少,p=0.03<a=0.05,那么拒绝

假设,这一决策可能犯错的概率是0.03。需要指出的是,如果P>a,那么假设不被拒

绝,在这种情况下,第一类错误并不会发生。

7、问:卡方检验的结果,值是越大越好,还是越小越好?

答:与其它检验一样,所计算出的统计量越大,在分布中越接近分布的尾端,所对应的

概率值越小。

如果试验设计合理、数据正确,显著或不显著都是客观反映。没有什么好与不好。

8、问:配对样本的T检验和相关样本检验有何差别?

答:配对样本有同源配对(如动物实验中双胞胎)、条件配对(如相同的环境)、自身

配对(如医学实验中个体的用药前后)等。(好像没有解释清楚啊,同问这个,到底什么

区别呢?)

9、问:在比较两组数据的率是否相同时;二项分布和卡方检验有什么不同?

答:卡方分布主要用于多组多类的比较,是检验研究对象总数与某一类别组的观察频数

和期望频数之间是否存在显著差异,要求每格中频数不小于5,如果小于5则合并相邻

组。二项分布则没有这个要求。

如果分类中只有两类还是采用二项检验为好。

如果是2*2表格可以用fisher精确检验,在小样本下效果更好。

10、问:如何比较两组数据之间的差异性

答:从四个方面来回答,

1).设计类型是完全随机设计两组数据比较,不知道数据是否是连续性变量?

2).比较方法:如果数据是连续性数据,且两组数据分别服从正态分布&方差齐(方差

齐性检验),则可以采用t检验,如果不服从以上条件可以采用秩和检验。

3).想知道两组数据是否有明显差异?不知道这个明显差异是什么意思?是问差别有无

统计学意义(即差别的概率有多大)还是两总体均数差值在哪个范围波动?如果是前者则

可以用第2步可以得到P值,如果是后者,则是用均数差值的置信区间来完成的。当然两

者的结果在SPSS中均可以得到。

11、问:回归分析和相关分析的联系和区别

答:回归分析(Regression):Dependantvariableisdefinedandcanbe

forecastedby

independentvariable.相关分析(Correlation):Therelationshipbtwtwo

variables.---AdosenotdefineordetermineB.

回归更有用自变量解释因变量的意思,有一点点因果关系在里面,并且可以是线性或者

非线形关系;

相关更倾向于解释两两之间的关系,但是一般都是指线形关系,特别是相关指数,有时

候图像显示特别强二次方图像,但是相关指数仍然会很低,而这仅仅是因为两者间不是线

形关系,并不意味着两者之间没有关系,因此在做相关指数的时候要特别注意怎么解释数

值,特别建议做出图像观察先。

不过,无论回归还是相关,在做因果关系的时候都应该特别注意,并不是每一个显著的

回归因子或者较高的相关指数都意味着因果关系,有可能这些因素都是受第三,第四因素

制约,都是另外因素的因或果。

对于此二者的区别,我想通过下面这个比方很容易理解:

对于两个人关系,相关关系只能知道他们是恋人关系,至于他们谁是主导者,谁说话算

数,谁是跟随者,一个打个喷嚏,另一个会有什么反应,相关就不能胜任,而回归分析则

能很好的解决这个问题

回端未必有因果彳系。回端的主要有二:一是解释,一是测。在於利用已知的自建艰

^^未知的依燮数。相H羽系数,主要在了解雨他燮数的共建情形。如果有因果1^彳系,通常

畲暹行路彳至分析(pathanalysis)或是^性结横取出系模式。

我觉得应该这样看,我们做回归分析是在一定的理论和直觉下,通过自变量和因变量的

数量关系探索是否有因果关系。楼上这位仁兄说“回归未必有因果关系……如果有因果关

系,通常进行路径分析或线性结构关系模式”有点值得商榷吧,事实上,回归分析可以看

成是线性结构关系模式的一个特例啊。

我觉得说回归是探索因果关系的并没错,因为实际上最后我们并不是完全依据统计的结

果来判断因果性,只有在统计结果和理论及现实比较吻合的基础上我们才肯定这种因果关

系。任何统计方法只是一种工具,但是不能完全依赖于这种工具。即使是SEM,我们也不

能说完全认定其准确性,因为即使方法是好的,但是变量的复杂关系呈现的方式也是多种

多样的,可能统计只能告诉你一个方向上的最优解,可未必是最符合实际的,更何况抽样

数据的质量好坏也会使得结果不符合事实,从而导致人们怀疑统计方法的准确性。

统计只说明统计关联。

不证明因素关系。

回归有因果关系,相关未必。

回归分析是处理两个及两个以上变量间线性依存关系的统计方法。此类问题很普遍,如

人头发中某种金属元素的含量与血液中该元素的含量有关系,人的体表面积与身高、体重

有关系;等等。回归分析就是用于说明这种依存变化的数学关系。

任何事物的存在都不是孤立的,而是相互联系、相互制约的。身高与体重、体温与脉

搏、年龄与血压等都存在一定的联系。说明客观事物相互间关系的密切程度并用适当的统

计指标表示出来,这个过程就是相关分析.

统计学笔记(2)一随机抽样与统计推断的逻辑

前天麦小兜问我怎样构造置信区间,在电话里我似乎没有解释清楚,这里重新整理出一

份笔记。同时有感于在国内做课题时,同行们的窘态历历在目(他们不知道如何去检验一

个变量是否符合正态分布),故记之,以勉励自己尽力思考清楚所学所用之物。

学过统计学的人都知道可以对一个未知总体(population)进行随机抽样,通过对样本

(sample)的描述、计算(例如计算样本均值、样本方差),进而推断总体的一些特征

(对某些假设进行检验,构造置信区间等等)。当然,很多现代的推断方法都是“菜谱

(cookbook)”性质的,不需要非专业人士进行详细掌握,例如,搞经济学的人往往在

不知道什么是F分布的情况下也能知道如何检验F统计量并对结论进行解释,甚至不用亲

手计算F统计量。但是,如果仔细思考一下其中的关系,可以看到这种随机抽样一推断中

包含着某种哲学,而这种哲学在某些地方的确显式出了人类的智慧。

本质上,这种方法是用一组我们掌握了100%信息的数据(样本),对一组我们几乎不掌

握信息或只掌握部分信息的数据(总体),进行拟合的过程。换句话说,以有知推未知的

过程。因为是对“未知”的推断,我们不可能有100%的把握,但同时是用“有知”的数

据,所以我们不会一点把握都没有。也许通过一个极为简单例子我们可以看到背后的这种

思维。下面就开始这个练习。

[例子]:假设一个学校有20000名学生,从中随机抽取1000名学生,问,这个学校

20000名学生的某门课的平均成绩是否为70/100?注意,这里并没有作巾有关总体的分布

的假设。

[问题1L我们能够用样本进行统计推断了吗?

似乎还不可以,逻辑上缺一步。这里值得注意的是,所抽取的1000学生是否是“随机

样木”?答窠是否定的。

随机抽样的思想是:抽出来的样本(sample)的分布是和总体(population)的分布是

一致的,这一点对于每一个观测值而言,能够成立。但随机样本还要求每个观测值

(observation)相互独立(independent),在这里狭义的理解便是,每一个观察值被取

到的概率是相同的。但是在上面例子里,这个条件显然并不能被满足(很多阿冏的学者往

往忽略这个条件)。如果你收集了1000个学生的成绩单,那么这1000个学生的成绩被抽

到概率取决于其被取到的顺序。由于一次抽取1000个学生的成绩,每个学生被抽到的次

数只是一次,不能被重复抽样。于是,样本中第一个学生被抽到的概率是1/20000,第二

个学生被抽到的概率则是1/19999,第三个学生是1/19998,……第1000个学生为

1/19000。也就是说,在•些学生被抽走之后,下一个学生被抽到的概率绝对不会等于

l/20000o只有在有放回(withreplacement)的抽样中,我们才能说每个学生被抽中的

概率是1/20000,也才能保证,我们抽取的是随机样本(randomsample)o但是那样的

话,我们又很可能抽不到1000个样本,因为一个学生被抽到大于一次重复的可能性不是

零。

幸运的是,注意到这一千个概率值相差并不大(因为总体值够大),那么,可以近似地认

为这1000个学生的成绩是随机样本(randomsample)。在做了这样的近似之后,我们方

可以进行统计推断。这种近似在统计学中很普遍。例如,中心极限定理(centrallimit

Theorem)说的是,大多数分布可以近似的看作正态(normal)分布,这使得正态分布在统

计学中占有极为重要的地位。这些分布的一个重要特征便是,变量可以看成是观测值的和

(的函数),例如,二项分布可以看成是一组伯努里试验(bernollitiral)结果的和。

另外,例如泊松(poisson)分布可以看成是二项(binomial)分布,而后者又可近似看作

正态分布。

但是,完成了这个近似,我们还需要更多的假设才能进行统计推断和检验(inference

andtest)。例如,我们必须了解总体的分布情况,即使不知道所有参数的具体值。(目

前假设我们只讨论参数(parametric)方法)

[情形一]:我们确切知道这20000学生的成绩符合(正态)分布,均值未知(unkown

mean)但是方差已知(knownvariance)o

[问题2]对于符合任意分布的样本,样本均值和样本方差符合什么样的规律?

利用简单的数学期望的性质可以得到如下关系:

(1)样本均值的期望=总体均值。

(2)样本均值的方差=总体方差/样本数(样本均值的波动没有单个观测值变化大)通

过这些变量,我们可以构造统计量Z:

(3)Z=(样本均值-总体均值)/根号(总体方差/样本数)。根据(1)(2)和中心极

限定理,对于任何总体,Z统计量符合标准正态分布。值得注意的是,对于这个Z统计

量,我们掌握了大量的信息。例如,对于任意给定的A值,我们完全可以计算出符合

(4)Pr(Z<|z|)=A%的z值。

但是由于Z是变量,我们并未掌握100%的信息。

注意(3)和(4)式的含义,由于我们可以算出样本均值和样本方差,总体方差,那么

z便是由总体均值唯一决定的函数。于是,我们可以反算出总体均值的函数表达式,因为

总体均值仅仅是z的反函数。给定A,我们知道z的取值范围,也就知道了总体均值的变

化范围。这个变化范围就是我们所说的置(自)信区间(confidenceinterval),例如Pr

(cl〈总体均值<c2)=90%,cl是5%百分位(percentile)的数值,c2是95%百分位的数

值。也就是说,总体均值落在cl,c2区间的概率是90%。

于是我们可以进行假设检验:H0:总体均值=70VSHl:notH0。

(assume:size=10%)。

这个时候,我们知道Pr(cl<总体均值<c2)=90%,那么只要总体均值〈cl或者总体均

值>。2我们就可以在10%的水平上推翻H0。

[情形二]我们不知道总体方差,也不知道总体均值。

再看式子(3),我们知道不能用正态分布来进行推断了,于是得用新的方法,即t分

布。根据定义,样本方差=$1101(观测值i-样本均值)~2;i=l,2,1000。

样本均(lk=sum(观测值i)/样本数i=l,2,....1000o

可以证明(过程复杂,需要用到正交矩阵运算),(样本方差/总体方差)符合(样本

值T)个自由度的代方(chi-squared)分布。同时,样本方差和样本均值是独立变量。

那么构造新的t变量:t=Z/根号(卡方/自由度)。

值得注意,分子分母各是•个分式,各自的分母都带有一个未知数,即总体方差。但幸

运的是,这两者互相销去。于是,t只是由总体均值唯一决定的函数。

那么我们又可以进行构造置信区间的练习。这里需要指出的是,(i)对于符合任意分

布的总体而言,Z符合标准正态分布,因为样本均值是所有观测值的“和”(乘以一个常

数),只要样本数够大,中心极限定理保证了其近似于标准正态分布。(ii)但是,如果

总体不符合正态部分,那么我们无法进行t检验。因为无法保证样本方差符合卡方分布,

于是也就无法保证t符合t分布。

总结一下这里的哲学。我们用了一个掌握了100%信息的样本,计算了几个值(样本均

值,样本方差)。然后构造出了一个我们掌握了很大信息的统计量Z,或t。再用这些信

息去了解我们掌握了少数信息的总体。耐人寻味的地方在于,这个符合标准正态分布的统

计量Z,和3其中的信息一些来自样本,

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论