数据分析实验报告-2

数据分析课程实验报告学院：理学院 专业：信息与计算科学班级：姓名：学号：一、实验题目所做实验属于哪一部分的内容。例如：一元线形回归及其在SPSS中的实现。二、实验目的1、加深对聚类分析原理的理解；2、理解聚类分析中变量聚类的原理；3、运用SPASS软件解决关于聚类分析方面具体的问题；三、实验原理聚类分析也称群分析、点群分析，他是研究分类的一种多元统计方法。例如，我们可以根据学校的师资、设备、学生的情况，将大学分成一流大学，二流大学等；国家之间根据其发展水平可以划分为发达国家、发展中国家；自然界生物可以分为动物和植物等等。这些就是一些分类。那么分类根据什么分呢？聚类分析的基本思想是在样品之间定义距离，在样品之间定义相似系数，距离或相似系数代表样品或者变量之间的相似程度。按相似程度的大小，将样品（或变量）逐一归类，关系密切的类聚集到一个小的分类单位，然后逐步扩大，使得关系疏远的聚合到一个大的分类单位，直到所有的样品（或变量）都聚集完毕，形成一个表示亲疏关系的谱系图，依次按照某些要求对样品（或变量）进行分类。根据分类对象不同分为样品聚类和变量聚类，样品聚类在统计学中又称为型聚类，它是根据被观测的对象的各种特征即反映被观测对象的特征的各变量值进行分类；变量聚类在统计学中有称为型聚类，它反映事物特点的变量有很多，我们往往根据所研究的问题选择部分变量对事物的某一方面进行研究。依据聚类方式的不同我们可以有很多种聚类如：快速聚类法，谱系聚类法等等。型聚类分析的主要作用是：1、不但可以了解个别变量之间的关系的亲疏程度，而且可以了解各个变量组合之间的亲疏程度。2、根据变量的分类结果以及它们之间的关系，可以选择主要变量进行回归分析或型聚类分析。型聚类分析的优点是：1、可以综合利用多个变量的信息对样本进行分类；2、分类结果是直观的，聚类谱系图非常清楚地表现其数值分类结果；3、聚类分析所得到的结果比传统分类方法更细致、全面、合理。变量聚类的基本原理变量聚类在实际中也是广泛应用，一方面，通过变量聚类可以发现某些变量之间的一些共性，以有利于分析问题和解决问题；另一方面，变量聚类也可作为某些数据分析的中间过程，例如，在回归分析中，若涉及的自编来那个很多，则可以先考虑用变量聚类，再在每一类变量中进行主成分分析，选取各类中的某些主成分作为新的自变量，这样不但可以消除变量间的复共线性，而且也可以达到降低自变量维数的目的。设对个变量个观测了次，得到的观测数据向量为变量的观测向量与间的相似性可以用相似系数度量。设则与的相似系数是显见，若将与看作维空间向量，则是它们的夹角余弦。变量观测向量两两间的相似系数构成相似系数矩阵显然，对于标准化数据，即原观察数据的相关系数矩阵，这时的大小反应了两个变量与线性关系的强弱。从出发，关于变量的谱系聚类过程与从距离矩阵出发，关于样品的谱系聚类过程类似，只是由于越大，表明与越相似，因此，每次应选取相似矩阵或更新的相似矩阵中主对角线以外的最大元素所对应的两个变量或两个类合并。类与类之间的相似性度量可类似于前述的定义。需要指出的是，在系统的过程中，总是从不相似度量的距离矩阵出发进行巨雷，因此看，若利用此过程对变量聚类，应先将相似矩阵变化为不相似度量的距离矩阵，再从出发，按照样品的谱系聚类法对变量角力。通常的变换有或，若为相关系数矩阵，且我们一变量的线性关系强弱作为相似性的度量，这时可令.样品间的距离1、距离定义：设满足下面的三个条件（1）且当且仅当时；（2）；（3）；距离定义有很多种，常见的有：(1)欧氏距离(Euclideandistance)(2)绝对距离（Block距离）(3)切比雪夫距离(Chebychev)2、我们主要用到快速聚类，因此我们讲述一下快速聚类的步骤：（1）选择聚点，得到初始聚点的集合，可以假定聚类中采用距离是欧氏距离，即上面的式子。（2）按照如果某一个点到该聚点的距离比到其他聚点的距离小，就把该点分为该聚点的类的原则，实现对所有点的初始划分，得到初始类：（3）从出发，计算新的聚点集合以的重心为新的聚点其中是类中的样品数，这样得到新的聚点集合：从出发，将样品进行新的分类。记这样依次计算下去（4）设在第步得到分类在以上的递推过程中，是类的重心，但是其不一定是样品，又一般不是下一聚类的重心，但是当逐渐增大时，分类趋于稳定此时有就会近似为的重心，从而，，算法即可结束，实际计算时候若相邻的两次迭代使得分类相同，则计算即告结束。一般情况下，我们也可以设置收敛准则为当聚点改变的最大距离小于或等于初始聚点之间的最小距离乘以给定的某个数值时，计算过程结束。四、实验内容例题.我们以2005年31个省，市，自治区的城镇居民月平均消费支出数据为例，在spss中利用K-均值法对31个省市自治区的城镇居民消费水平进行聚类分析。城镇居民消费水平通常用表9.13中的八项指标来描述，八项指标间存在一定的线性相关。为研究城镇居民的消费结构，需将相关性强的指标归并到一起，这实际就是对指标聚类。原始数据列于表9.13。表9.132005年31个省、市、自治区城镇居民月平均消费数据x1人均粮食支出（元/人）x5人均衣着支出（元/人）x2人均副食支出（元/人）x6人均日用杂品支出（元/人）x3人均烟、酒、饮料支出（元/人）x7人均水电燃料支出（元/人）x4人均其他副食支出（元/人）x8人均其他非商品支出（元/人）x1x2x3x4x5x6x7x8北京21.30124.8935.4373.9893.0120.5843.97433.73天津21.50122.3929.0851.6455.0411.3054.88288.13河北18.2590.2124.4532.4462.487.4547.50178.84山西21.8466.3818.0531.3274.488.1934.97177.45内蒙古21.3767.0820.2835.2781.0710.9439.46182.20辽宁22.74115.8828.2142.4458.079.6348.65194.85吉林20.2288.9418.5435.6365.728.8150.29186.52黑龙江21.3375.5014.0029.5669.298.2442.08165.90上海21.13168.6940.8170.1274.3215.4650.90422.74江苏18.61122.5127.0742.5063.4715.3836.14240.92浙江19.96142.2443.3350.74101.7712.9253.44394.55安徽19.61107.1332.8535.7761.347.5334.60142.23福建25.56171.6522.3040.5357.1312.6054.03225.08江西18.75104.6815.5535.6151.8011.1836.27142.72山东18.2788.3419.0743.1972.9812.5942.16200.18河南19.0773.1818.0129.3864.518.9138.14155.45湖北18.76102.6721.8730.4764.3311.9942.14168.17湖南20.25104.4520.7238.1562.9812.6739.16213.56广东23.68173.3017.4343.5953.6616.8665.02385.94广西18.70131.3511.6932.0641.5410.8442.77178.51海南16.16139.9212.9823.5824.8710.7632.35144.21重庆18.18120.3926.1837.9468.1611.6438.48246.37四川18.53109.9521.4933.0450.9810.8833.96183.85贵州18.3392.4325.3832.1956.3214.0038.57144.82云南22.3099.0833.3632.0152.067.0432.85190.04西藏29.67146.9064.5154.3686.1014.7732.19193.10陕西20.0370.7519.7534.9553.2910.5538.20189.41甘肃18.6872.7423.7238.6962.419.6535.26170.12青海20.3375.6420.8833.8653.8110.0632.82171.32宁夏19.7570.2418.6736.7161.7510.0840.26165.22新疆21.0378.5514.3534.3364.989.8333.87161.67五、实验步骤在spss中依次点击“analyze,classify,k-meanscluster”,打开k-meansclusteranalysis对话框，将8个变量选入variable框中,将表示地区的变量选入labelcasesby栏中，将分类数定为3.另外，点击iterate按钮可以在其中输入最大迭代次数和收敛标准；在save中按钮中可以选择保存样本的聚类结果和各样本距各自中心点的距离。过程如下：1.打开k-meansclusteranalysis对话框。2.将8个变量选入variable框中3.选择最大迭代次数输出结果六、实验结果与分析其中第一个表