


下载本文档
版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
1、数据归一化方法大全在数据分析之前,我们通常需要先将数据标准化(normalization),利用标准 化后的数据进行数据分析。数据标准化也就是统计数据的指数化。数据标准化处 理主要包括数据同趋化处理和无量纲化处理两个方面。数据同趋化处理主要解决 不同性质数据问题,对不同性质指标直接加总不能正确反映不同作用力的综合结 果,须先考虑改变逆指标数据性质,使所有指标对测评方案的作用力同趋化,再 加总才能得出正确结果。数据无量纲化处理主要解决数据的可比性。数据标准化 的方法有很多种,常用的有“最小最大标准化”、“z-score 标准化”和“按小 数定标标准化”等。经过上述标准化处理,原始数据均转换为无量
2、纲化指标测评 值,即各指标值都处于同一个数量级别上,可以进行综合测评分析。一、 min -max 标准化min -max 标准化方法是对原始数据进行线性变换。设 mina 和 maxa 分别 为属性 a 的最小值和最大值,将 a 的一个原始值 x 通过 min -max 标准化映射成在区间0,1中的值 x ,其公式为:新数据=(原数据-极小值)/(极大值-极小值)二、z-score 标准化这种方法基于原始数据的均值(mean)和标准差(standard deviation )进行 数据的标准化。将 a 的原始值 x 使用 z-score 标准化到 x。z-score 标准化方法适用于属性 a
3、的最大值和最小值未知的情况,或有超出 取值范围的离群数据的情况。新数据=(原数据-均值)/标准差spss 默认的标准化方法就是 z-score 标准化。用 excel 进行 z-score 标准化的方法:在 excel 中没有现成的函数,需要自己 分步计算,其实标准化的公式很简单。步骤如下:1. 求出各变量(指标)的算术平均值(数学期望)xi 和标准差 si ;2. 进行标准化处理:zij(xijxi)si其中:zij 为标准化后的变量值;xij 为实际变量值。3.将逆指标前的正负号对调。标准化后的变量值围绕 0 上下波动,大于 0 说明高于平均水平,小于 0 说明 低于平均水平。三、deci
4、mal scaling 小数定标标准化这种方法通过移动数据的小数点位置来进行标准化。小数点移动多少位取决 于属性 a 的取值中的最大绝对值。将属性 a 的原始值 x 使用 decimal scaling 标 准化到 x的计算方法是:x=x/(10*j)其中,j 是满足条件的最小整数。例如 假定 a 的值由-986 到 917,a 的最大绝对值为 986,为使用小数定标 标准化,我们用 1000(即,j=3)除以每个值,这样,-986 被规范化为-0.986。注意,标准化会对原始数据做出改变,因此需要保存所使用的标准化方法的 参数,以便对后续的数据进行统一的标准化。除了上面提到的数据标准化外还有对数 logistic 模式、模糊量化模式等等: 对数 logistic 模式:新数据=1/(1+e(-原数
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 二零二五年裁床设备租赁、安装及运营管理承包合同
- 二零二五年度房地产企业信息安全职业经理人保障聘用合同副本
- 2025版国际贸易实务操作流程图解及文档全文版
- 二零二五年度施工现场安全责任与事故预防管理合同
- 二零二五年度旅游区场地使用权租赁合同
- 二零二五年度驾校与汽车租赁公司合作开展自驾游培训及租赁合同
- 二零二五年商业调查保密承诺函
- 二零二五年度拌合站场地租赁与环保设备租赁合同
- 2025版家庭装修与节能改造合同
- 2025年度餐饮行业员工培训与发展基金协议
- 宗教数字化治理体系-洞察及研究
- 2024年云南省西盟佤族自治县人民医院公开招聘医务工作人员试题带答案详解
- 专项债申报操作流程及项目评审细则(详细版)
- 2025至2030中国电子产品散热器行业市场现状分析及竞争格局与投资发展报告
- 北师大版二年级下册口算题大全(全册完整) (一)
- JJG 667-2025液体容积式流量计检定规程
- 车间包装质量培训
- 2024年福州国企招聘笔试真题
- 普陀区2024-2025学年下学期期末考试六年级数学试卷及答案(上海新教材沪教版)
- 火场排烟消防课件
- 纺织检测公司管理制度
评论
0/150
提交评论