基于weka的数据分类和聚类分析实验报告(共11页)

1、数据挖掘实验报告 PAGE PAGE 13基于weka的数据(shj)分类分析实验报告(bogo)1实验(shyn)基本内容本实验的基本内容是通过使用weka中的三种常见分类和聚类方法（决策树J48、KNN和k-means）分别在训练数据上训练出分类模型，并使用校验数据对各个模型进行测试和评价，找出各个模型最优的参数值，并对三个模型进行全面评价比较，得到一个最好的分类模型以及该模型所有设置的最优参数。最后使用这些参数以及训练集和校验集数据一起构造出一个最优分类器，并利用该分类器对测试数据进行预测。2数据的准备及预处理2.1格式转换方法(1)打开“data02.xls” 另存为CSV类型，得到“

2、data02.csv”。 (2)在WEKA中提供了一个“Arff Viewer”模块，打开一个“data02.csv”进行浏览，然后另存为ARFF文件，得到“data02.arff”。 。3. 实验过程及结果截图3.1决策树分类(1)决策树分类用“Explorer”打开数据“data02.arff”，然后切换到“Classify”。点击“Choose”，选择算法“trees-J48”，再在“Test options”选择“Cross-validation（Flods=10）”，点击“Start”，开始运行。系统默认trees-J48决策树算法中minNumObj=2，得到(d do)如下结果=

3、 Summary =Correctly Classified Instances 23 88.4615 %Incorrectly Classified Instances 3 11.5385 %Kappa statistic 0.7636Mean absolute error 0.141 Root mean squared error 0.3255Relative absolute error 30.7368 %Root relative squared error 68.0307 %Total Number of Instances 26 = Detailed Accuracy By Cla

4、ss = TP Rate FP Rate Precision Recall F-Measure ROC Area Class 0.824 0 1 0.824 0.903 0.892 N 1 0.176 0.75 1 0.857 0.892 YWeighted Avg. 0.885 0.061 0.913 0.885 0.887 0.892= Confusion Matrix = a b - classified as 14 3 | a = N 0 9 | b = Y使用(shyng)不同的参数准确率比较：minNumObj2345Correctly Classified Instances23

5、（88.4615 %）22（84.6154 %）23（88.4615 %）23（88.4615 %）由上表(shn bio)，可知minNumObj为2时，准确率最高。根据(gnj)测试数集，利用准确率最高的模型得到的结果： 分析(fnx)说明：在用J48对数据集进行分类时采用了10折交叉(jioch)验证（Folds=10）来选择和评估模型，其中属性值有两个Y，N。一部分结果如下：Correctly Classified Instances 23 88.4615 %Incorrectly Classified Instances 3 11.5385 %= Confusion Matrix =

6、 a b - classified as 14 3 | a = N 0 9 | b = Y这个(zh ge)矩阵是说，原来是“Y”的实例，有14个被正确的预测为“Y”,有3个错误的预测成了“N”。原本是“NO”的实例有0个被正确的预测成为“Y”，有9个正确的预测成了“N”。“14+3+0+9=26”是实例的总数，而（14+9）/ 26=0.884615正好是正确分类的实例所占比例。这个矩阵对角线上的数字越大，说明预测得越好。(2)K最近邻分类算法用“Explorer”打开数据“data02.arff”，然后切换到“Classify”。点击“Choose”，选择算法“lazy-IBk”，再在“T

7、est options”选择“Cross-validation（Flods=10）”，点击“Start”，开始运行。训练结果：系统默认(mrn)lazy-IBk K最近邻分类算法中KNN=1，得到如下结果= Summary =Correctly Classified Instances 20 76.9231 %Incorrectly Classified Instances 6 23.0769 %Kappa statistic 0.4902Mean absolute error 0.252 Root mean squared error 0.4626Relative absolute erro

8、r 54.9136 %Root relative squared error 96.694 %Total Number of Instances 26 = Detailed Accuracy By Class = TP Rate FP Rate Precision Recall F-Measure ROC Area Class 0.824 0.333 0.824 0.824 0.824 0.768 N 0.667 0.176 0.667 0.667 0.667 0.768 YWeighted Avg. 0.769 0.279 0.769 0.769 0.769 0.768= Confusion

9、 Matrix = a b - classified as 14 3 | a = N 3 6 | b = Y使用不同(b tn)的参数准确率比较：KNN1234Correctly Classified Instances20（76.9231 %）19（73.0769%）23（88.4615 %）20（76.9231 %）由上表(shn bio)，可知KNN为3时，准确率最高。根据测试(csh)数集，利用准确率最高的模型得到的结果：分析(fnx)说明：在用lazy-Ibk(KNN=3)对数据集进行分类时采用了10折交叉验证(ynzhng)（Folds=10）来选择和评估模型，其中属性值有两个Y，

10、N。一部分结果如下：= Summary =Correctly Classified Instances 23 88.4615 %Incorrectly Classified Instances 3 11.5385 %= Confusion Matrix = a b - classified as 16 1 | a = N 2 7 | b = Y这个矩阵是说，原来(yunli)是“Y”的实例，有16个被正确(zhngqu)的预测为“Y”,有1个错误的预测成了“N”。原本是“NO”的实例有2个被正确的预测成为“Y”，有9个正确的预测成了“7”。“16+1+2+7=26”是实例的总数，而（16+7）

11、/ 26=0.884615正好是正确分类的实例所占比例。二、对“data01” 进行聚类分析1.数据格式的转换(1)打开“data01.xls” 另存为CSV类型，得到“data01.csv”。 (2)在WEKA中提供了一个“Arff Viewer”模块，打开一个“data01.csv”进行浏览，然后另存为ARFF文件，得到“data01.arff”。 2.聚类过程用“Explorer”打开数据“data01.arff”，然后切换到“Cluster”。点击“Choose”，选择算法“SimpleKMeans（numClusters=6，seed=200），再在“Test options”选择“

12、Use training set”，点击“Start”，开始运行。训练结果：采用(ciyng)simpleKMeans算法，其中numClusters=6，seed=100，得到(d do)如下结果：Number of iterations: 3Within cluster sum of squared errors: 6.065322314450069（平方(pngfng)误差之和）Clustered InstancesClustered Instances0 4 ( 15%)1 3 ( 12%)2 4 ( 15%)3 3 ( 12%)4 2 ( 8%)5 10 ( 38%)（各类的包含的实

13、例个数以及占总实例的百分比）说明(shumng)：其中(qzhng)当seed的取值越大，平方(pngfng)误差之和越小。在这次实验(shyn)seed=100，得到：Within cluster sum of squared errors: 6.065322314450069.这是评价聚类好坏的标准，数值越小说明同一簇实例之间的距离就越小。接下来“Cluster centroids”：列出了各个簇中心的位置：Attribute Full Data 0 1 2 3 4 5 (26) (4) (3) (4) (3) (2) (10)=sample 13.5 22.5 4.6667 20.5 1

14、4.6667 4.5 11.2old-year 48.0769 65.75 59.3333 50.5 25 56.5 41.9VEGF 1.9231 2.75 2.3333 2 2.6667 3 1MVC 102.1538 126.45 100.6667 127.4 88.2667 104 86.58cancer-grade 2.5769 3.75 2 3 3.3333 3.5 1.7cancer-stage 2.1538 3.25 1.3333 3 2.3333 3.5 1.3cancer metastasis N Y N N Y Y N最后“Clustered Instances”列出了各个簇中实例的数目及百分比：Clustered Instances0 4 ( 15%)1 3 ( 12%)2 4 ( 15%)3 3 ( 12%)4 2 ( 8%)5 10 ( 38%)（各类的包含的实例个数以及占总实例的百分比）三、根据提供的“data02”进行关联分析由于程序和系统故障，所以不能正确的进行关联分析 5.实验(shyn)总结本次实验进行比较顺利，使我对如何在Weka中进行分类分析有了更深刻的了解，对Weka中进行分类分析