特征提取与选择_总结_第1页
特征提取与选择_总结_第2页
特征提取与选择_总结_第3页
特征提取与选择_总结_第4页
特征提取与选择_总结_第5页
全文预览已结束

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

1、第七章第七章 特征提取与选择特征提取与选择_ _总结总结 直接选择法: 变换法提取: 7 7 . . 2 2 类别可分性判据类别可分性判据 准则准则类别可分性判据,类别可分性判据,刻划特征对分类的贡献。 希望所构造的可分性判据满足下列要求可分性判据满足下列要求: (1)与误分概率(或误分概率的上界、下界)有单调关系。 (2)当特征相互独立时,判据有可加性,即 (3)判据具有“距离”的某些特性,即 ,当时; ,当时; (4)对特征数目是单调不减,即加入新的特征后,判据值不减, 7.2.17.2.1 基于几何距离的可分性判据基于几何距离的可分性判据 ( (一一) )类内距离类内距离 类内均方欧氏距

2、离 ( (二二) )类内离差(散布)矩阵类内离差(散布)矩阵 ( (三三) )多类情况下总的类内、类间及总体离差(散布)矩阵多类情况下总的类内、类间及总体离差(散布)矩阵 总的类内离差矩阵 总的类间离差矩阵 总体离差矩阵为 易导出 其中,为类的先验概率,为类的均值矢量,为总的均值矢量, 在有些关系的推导和实际应用中,它们可用如下的统计量代替 可以由、和构造如下的可分性判据: 可以证明、与在任何非奇异线性变换下是不变的,与坐标系有 关。 7.2.27.2.2 基于类的概率密度函数的可分性判据基于类的概率密度函数的可分性判据 基于类概密的可分性判据应满足: (1); (2)当两类密度函数完全不重迭

3、时,; (3)当两类密度函数完全重合时,; (4)相对两个概密具有“对称性” 。 ( (一一)Bhattacharyya)Bhattacharyya 判据判据( () ) 式中表示特征空间。在最小误分概率准则下,误分概率 ( (二二)Chernoff)Chernoff 判据判据( () ) 性质: (1)对一切,。 (2)对一切,。 (3)当 和参数互调时,才有对称性,即 (4)当的各分量相互独立时, 。 (5)当的各分量相互独立时,有 (6)最小误分概率 ( (三三) )散度散度( () ) 类的平均可分性信息为: 类的平均可分性信息为: 对于和两类总的平均可分性信息称为散度: 如果,则 当时, 散度具有如下性质散度具有如下性质: (1)。 (2) 。 (3) 。 (4)当的各分量相互独立时, (具有可加性) (5)当的各分量相互独立时, (对特征数目单调不减) 又当时,当时,而 。 对于类问题,可采用平均-判据、-判据、-判据: 大盖小问题大盖小问题 总的平均(变换)判据 7.2.37.2.3 基于类的后验概率与熵的可分性判据基于类的后验概率与熵的可分性判据 熵: 熵的主要性质: (1),当且仅当某个 有而其余的时等号成立, 即,确定场熵最小。 (2),当且仅当时等号成立,即, 等概率场熵最大。 (3)是的连续上凸

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论