医学数据挖掘课件：差异和聚类分析

1、基因表达数据的获得与分析基因表达数据的获得与分析基因芯片数据的基础分析思路预处理差异表达基因筛选聚类与分类功能注释和富集分析基因芯片数据的基础分析思路预处理差异表达基因筛选表达谱分析的主要目的之一就是挑出差异表达的基因。何谓显著表达差异？它通常是指一个基因在两个条件中表达水平的检测值在排除实验、检测等因素外，达到一定的差异，具有统计学意义，同时也具有生物学意义。 在两个或多个条件下比较识别有显著表达差异的基因，从中识别出与条件相关的特异性基因例如，识别可用于肿瘤分型的特异基因等。差异表达基因筛选表达谱分析的主要目的之一就是挑出差异表达的基筛选差异表达基因的方法倍数法假设检验法 - t检验 -方

2、差分析法 （ANOVA） -SAM (Significance Analysis of Microarrays) -信息熵筛选差异表达基因的方法倍数法倍数法（fold change）最早应用于基因芯片数据分析的方法，也是常用方法一般0.5-2.0范围内的基因不存在明显的表达差异, 该范围之外则认为基因的表达出现明显改变.优点是计算简单直观，缺点是倍数阈值的选取是任意的, 而且没有考虑到差异表达的统计显著性，忽视了变化小的基因实验样本中的表达值对照样本中的表达值倍数法（fold change）实验样本中的表达值对照样本中t检验 (t -test)判断基因在两种不同条件下的表达差异是否具有显著性t

3、检验 (t -test)判断基因在两种不同条件下的表达差异方差分析( ANOVA)其目的是推断两组或多组资料的总体均数是否相同, 检验两类或多类样本均数的差异是否有统计学意义它将基因在样本之间的总变异分解为组间变异和组内变异两部分。通过方差分析的假设检验判断组间变异是否存在，如果存在则表明基因在不同条件下的表达有差异。方差分析( ANOVA)其目的是推断两组或多组资料的总体均数SAM是通过FDR值矫正多重假设检验中的假阳性率SAM 分析步骤计算统计量，是t统计量的修正扰动实验条件，计算扰动后的基因表达的相对差异统计量计算扰动后的平均相对差异统计量估计FDR（false discovery ra

4、te）SAM (significance analysis of microarrays)SAM (significance analysis of 确定差异表达基因阈值：以最小 的正值和最大的负值作为统计阈 值，运用该阈值，统计在值中超 过该阈值的假阳性基因个数，估 计假阳性发现率FDR值。通过调整FDR值的大小得到差异 表达基因。SAM (significance analysis of microarrays)SAM (significance analysis of 实现程序data - read.table(C:R实现miRNA_expression_all.txt,header=T

5、);rownames(data) - data,1;data - data,-1; d - data,1:60; n - data,61:75; fold_change - apply(d,1,mean)/apply(n,1,mean);#fold_change值 ttest - matrix(0,nrow=dim(data)1,ncol=2); for (i in 1:dim(data)1) t - t.test(ni,di,var.equal=T); ttesti,1 - t$statistic; ttesti,2 - t$p.value; #t检验的P值和t统计量 fdr - p.adj

6、ust(ttest,2,BH);#P值的BH校正实现程序data 1.5且fdr_BH0.1index1 - (fold_change1.5); index2 - fdr0.1; index - index1&index2; result - cbind(rownames(data),fold_change,ttest,fdr); colnames(result) - c(miRNA,Fold_change,TSores,PValues,fdr_BH); result 1.5且fdr_BH0.差异表达基因结果15个表达下调miRNA20个表达上调miRNA结果差异表达基因结果15个表达下调mi

7、RNA结果基因芯片数据的基础分析思路预处理差异表达基因筛选聚类与分类功能注释和富集分析基因芯片数据的基础分析思路预处理引言物以类聚，人以群分基于物体的相似性将物体分成不同的组引言物以类聚，人以群分基于物体的相似性将物体分成不同的组基因表达谱数据的聚类对基因进行聚类识别功能相关的基因识别基因共表达模式对样本进行聚类质量控制检查样本是否按已知 类别分组亚型识别基因表达谱数据的聚类对基因进行聚类距离尺度函数（相似性）几何距离欧氏距离,切氏距离 马氏距离,明氏距离线性相关系数 皮尔森相关系数非线性相关系数斯皮尔曼秩相关其他距离尺度函数（相似性）几何距离明氏距离令表示样品与的距离 设原始数据为特别地，当

8、k1时，即为绝对值距离当k2时，即为欧氏距离当k时，即为切比雪夫距离几何距离明氏距离令表示样品与的距离 设原始数据为特别地，当k1时，123452018104471055325.236.328.911.517欧氏距离切比雪夫距离120725.2欧氏距离切比雪夫距离变量间相似系数变量和的相关系数： 皮尔森相关系数斯皮尔曼秩相关系数又称等级相关系数，或顺序相关系数,是将两要素的样本值按数据的大小顺序排列位次，以各要素样本值的位次代替实际数据而求得的一种统计量。 变量间相似系数变量和的相关系数： 皮尔森相关系数斯皮尔曼秩相层次聚类层次聚类算法将研究对象按照它们的相似性关系用树形图进行呈现，进行层次聚

9、类时不需要预先设定类别个数，树状的聚类结构可以展示嵌套式的类别关系。层次聚类层次聚类算法将研究对象按照它们的相似性关系用树形图进层次聚类在对含非单独对象的类进行合并或分裂时，常用的类间度量方法类p与q之间的距离pq层次聚类在对含非单独对象的类进行合并或分裂时，常用的类间度量欧氏距离+最小距离AD欧氏距离+最小距离AD欧氏距离+最小距离并类距离并类距离欧氏距离+最小距离并并欧氏距离+最小距离并类距离并类距离欧氏距离+最小距离并并欧氏距离+最小距离并类距离决定类的个数与类 观察此图，我们可以把4个样品分为2类、欧氏距离+最小距离并决定类的个数与类 观察此图，我们可以聚类法的基本步骤：1.计算n个样

10、品两两间的距离 ，记作D= 。2.构造n个类，每个类只包含一个样品。3.合并距离最近的两类为一新类。4.计算新类与各当前类的距离。5.重复步骤3、4，合并距离最近的两类为新类，直到所有的类并为一类为止。6.画聚类谱系图。7.决定类的个数和类。准则：同一个聚类中的对象尽可能的接近或相关，不同聚类中的对象尽可能的原理或不同聚类法的基本步骤：准则：同一个聚类中的对象尽可能的接近或相关层次聚类确定类别个数？相似性阈值指定类别数层次聚类确定类别个数？层次聚类疾病的遗传异质性Genetic heterogeneity refers to multiple origins causing the same disorder in different individuals.层次聚类层次聚类层次聚类层次聚类层次聚类层次聚类Coupled two-way clustering (CTWC)采用嵌套式基因和疾病两个方向的循环搜索，识别疾病亚类及导致疾病亚类发生的对应基因簇层次聚类Coupled two-way clustering程序index - rownames(data)%in%result,1;#聚miRNadiff_expr - dataindex,;hc - hclust(dist(dif