高分辨率遥感影像融合及其在城市规划中的应用课件

遥感影像数据融合原理与方法数据融合基本涵义定义图像融合就是将同一区域的多源遥感图像按统一的坐标系统，通过空间配准和内容复合，生成一幅比单一信息源更准确、更完全、更可靠的新图像的技术方法。其优点在于：提高了影像的空间分解力和清晰度；提高了影像的平面测图精度、分类精度及可靠性；增强了影像的解译和动态监测能力，有效提高遥感影像数据的利用率等；应用领域数据融合（datafusion）最早被应用于军事领域。现在数据融合的主要应用领域有：多源影像复合、机器人和智能仪器系统、战场和无人驾驶飞机、图像分析与理解、目标检测与跟踪、自动目标识别等等。相对于单源遥感影象数据，多源遥感影象数据所提供的信息具有以下特点：冗余性：表示多源遥感影像数据对环境或目标的表示、描述或解译结果相同；互补性：指信息来自不同的自由度且相互独立合作性：不同传感器在观测和处理信息时对其它信息有依赖关系；信息分层的结构特性：数据融合所处理的多源遥感信息可以在不同的信息层次上出现，这些信息抽象层次包括像素层、特征层和决策层，分层结构和并行处理机制还可保证系统的实时性。数据融合原理及过程

一般来说，遥感影像的数据融合分为预处理和数据融合两步预处理：主要包括遥感影像的几何纠正、大气订正、辐射校正及空间配准几何纠正、大气订正及辐射校正的目的主要在于去处透视收缩、叠掩、阴影等地形因素以及卫星扰动、天气变化、大气散射等随机因素对成像结果一致性的影响；影像空间配准的目的在于消除由不同传感器得到的影像在拍摄角度、时相及分辨率等方面的差异。影像的空间配准是遥感影像数据融合的前提。空间配准一般可分为以下步骤:特征选择：在欲配准的两幅影像上，选择如边界、线状物交叉点、区域轮廓线等明显的特征。特征匹配：采用一定配准算法，找处两幅影像上对应的明显地物点，作为控制点。空间变换：根据控制点，建立影像间的映射关系。插值：根据映射关系，对非参考影像进行重采样，获得同参考影像配准的影像。空间配准的精度一般要求在1~2个像元内。空间配准中最关键、最困难的一步就是通过特征匹配寻找对应的明显地物点作为控制点。2.数据融合

根据融合目的和融合层次智能地选择合适的融合算法，将空间配准的遥感影像数据（或提取的图像特征或模式识别的属性说明）进行有机合成，得到目标的更准确表示或估计。对于各种算法所获得的融合遥感信息，有时还需要做进一步的处理，如“匹配处理”和“类型变换”等，以便得到目标的更准确表示或估计。优点：保留了尽可能多的信息，具有最高精度。

局限性：效率低下：由于处理的传感器数据量大，所以处理时间较长，实时性差。分析数据限制：为了便于像元比较，对传感器信息的配准精度要求很高，而且要求影像来源于一组同质传感器或同单位的。分析能力差：不能实现对影像的有效理解和分析纠错要求较高：由于底层传感器信息存在的不确定性、不完全性或不稳定性，所以对融合过程中的纠错能力有较高要求。抗干扰性差：像元级融合所包含的具体融合方法有：代数法、IHS变换、小波变换、主成分变换（PCT）、K-T变换等。1.2特征级融合特征级融合是一种中等水平的融合。在这一级别中，先是将各遥感影像数据进行特征提取，提取的特征信息应是原始信息的充分表示量或充分统计量，然后按特征信息对多源数据进行分类、聚集和综合，产生特征矢量，而后采用一些基于特征级融合方法融合这些特征矢量，作出基于融合特征矢量的属性说明。特征级融合的流程：经过预处理的遥感影像数据——特征提取——特征级融合——（融合）属性说明。1.3决策级融合决策级融合是最高水平的融合。融合的结果为指挥、控制、决策提供了依据。在这一级别中，首先对每一数据进行属性说明，然后对其结果加以融合，得到目标或环境的融合属性说明。决策级融合的优点时具有很强的容错性，很好的开放性，处理时间短、数据要求低、分析能力强。而由于对预处理及特征提取有较高要求，所以决策级融合的代价较高。决策级融合的流程：经过预处理的遥感影像数据——特征提取——属性说明——属性融合——融合属性说明。2数据融合方法介绍

2.1代数法

代数法包括加权融合、单变量图像差值法、图像比值法等。（1）加权融合法（2）单变量图像差值法（3）图象比值法

2.2图像回归法（ImageRegression）图像回归法是首先假定影像的像元值是另一影像的一个线性函数，通过最小二乘法来进行回归，然后再用回归方程计算出的预测值来减去影像的原始像元值，从而获得二影像的回归残差图像。经过回归处理后的遥感数据在一定程度上类似于进行了相对辐射校正，因而能减弱多时相影像中由于大气条件和太阳高度角的不同所带来的影响。

2.3主成分变换（PCT或K-L变换）PCT是应用于遥感诸多领域的一种方法，包括高光谱数据压缩、信息提取与融合及变化监测等。PCT的本质是通过去除冗余，将其余信息转入少数几幅影像（即主成分）的方法，对大量影像进行概括和消除相关性。PCT使用相关系数阵或协方差阵来消除原始影像数据的相关性，以达到去除冗余的目的。对于融合后的新图像来说各波段的信息所作出的贡献能最大限度地表现出来。它将多波段的低分辨率图像进行PCA变换，将单波段的高分辨率图像经过灰度拉伸，使其灰度的均值与方差和PCA变换第一分量图像一致；然后用拉伸过的高分辨率图像代替第一分量图像，经过PCA逆变换还原到原始空间，生成具有高空问分辨率的多波段融合图像。PCT的优点是能够分离信息，减少相关，从而突出不同的地物目标。另外，它对辐射差异具有自动校正的功能，因此无须再做相对辐射校正处理。2.5乘积变换融合法乘积变换融合是应用最基本的乘积组合算法，直接对2种空间分辨率的遥感数据进行融合，其运算法则为：其中，Bi_new代表融合以后的波段数值（i=1，2，…，n）；

Bi_m代表多光谱图像中的任意一个波段数值；Bi_h代表高分辨率遥感数据波段值。

乘积变换是由Crippen的4种分析技术演变而来的，Crippen研究表明（Crippen，1989）：将一定亮度的图像进行变换处理时，只有乘法变换可以使其色彩保持不变。2.6Pansharp融合法(PCIGeomaticasoftware)

Pansharp算法用于高分辨率全色影像和多光谱影像的融合，生成高分辨率彩色影像。这种技术通常被称为Pan-sharpening。Pansharp是用于8bit，16bit或32bit数据，可以用于相同传感器或不同传感器之间影像的融合。Pan-sharpening自动融合算法是通过合并高分辨率的全波段影像(PAN)增强多波段影像的空间分辨率的一种影像融合技术。此种算法要求全波段影像和多波段影像同平台、同时间(或时间间隔很短)获得的。2.7Gram-Schmidt变换Gram-Schmidt(GS)变换是线性代数和多元统计中常用的多维线性正交变换，在任意可内积空间，任一组相互独立的向量都可通过GS变换找到该向量的一组正交基。设{u1,u2,…,un}是一组相互独立的向量，GS变换构造正交向量{v1,v2,…,vn}的方式如下：

假设v1=u1

，依次计算第i+1个正交向量：式中：wi为已经计算的前i个正交向量跨越的空间，projWiui+1是ui+1在wi的正交投影。第二个向量v2

的计算如图所示，其中v1=u1。2.5小波变换小波变换是一种新兴的数学分析方法，已经受到了广泛的重视。小波变换是一种全局变换，在时间域和频率域同时具有良好的定位能力，对高频分量采用逐渐精细的时域和空域步长，可以聚焦到被处理图像的任何细节，从而被誉为“数学显微镜”。小波变换常用于雷达影像SAR与TM影像的融合。它具有在提高影像空间分辨率的同时又保持色调和饱和度不变的优越性。2.6IHS变换3个波段合成的RGB颜色空间是一个对物体颜色属性描述系统，而IHS色度空间提取出物体的亮度I，色度H，饱和度S，它们分别对应3个波段的平均辐射强度、3个波段的数据向量和的方向及3个波段等量数据的大小。RGB颜色空间和IHS色度空间有着精确的转换关系。

以TM和SAR为例，变换思路是把TM图像的3个波段合成的RGB假彩色图像变换到IHS色度空间，然后用SAR图像代替其中的I值，再变换到RGB颜色空间，形成新的影像。2.7贝叶斯（Bayes）估计

2.8D-S推理法(Dempster-Shafter)2.9人工神经网络（ANN）

2.10专家系统

QuickBird遥感影像融合QuickBird（快鸟）介绍QuickBird（快鸟）是由“数字全球”公司运营，是目前世界上商业卫星中分辨率最高、性能最优的一颗卫星；快鸟-2卫星可以同时拍摄全色（空间分辨率为61cm）和多光谱图像（空间分辨率2.5m），也可以提供自然彩色和彩色红外合成图像；每次过顶可以拍摄连续10景图像（165km长）或者2×2景图像的面积，年拍摄能力为7000万平方千米。QuickBird影像融合上述影像融合方法是否适用？如果适用，哪种方法最优？融合结果评价指标均值与标准方差

在统计理论中，统计均值和标准差分别定义为：

均值反映平均亮度，如果均值适中，则视觉效果良好；方差反映了灰度相对于灰度均值的离散情况，方差越大，影像的对比度越强。信息熵

信息熵的大小，反应了图像携带的信息量的多少。融合图像的熵值越大，说明融合图像携带的信息量越大。QuickBird波段多光谱原始图像(R:3G:2B:1)QuickBird全色原始图像QuickBird影像融合实验QuickBird影像融合结果主成分变换融合乘积变换融合比值变换融合PANSHARP融合Gram-schmidt变换融合

从视觉效果上看，PanSharp变换和Gram-schmidt变换融合的图像不但很好的保留了多光谱图像的绝大部分光谱信息，而且图像色彩接近自然色，地物的对比效果较好，清晰度较高，总体视觉效果良好；主成分变换在目标地物的细节特征最为清晰；乘积变换的清晰度最差；比值变换的清晰度比乘积变换的高，但是比其它几种变换的要低。融合前后的数理统计参数比较融合后单色影像的熵值普遍都大于原始图像，均达到了信息融合的目的。应用Gram-schmidt变换融合后，方差和熵值都大于原始图像的相应波段，从而表明融合后图像的动态范围增大，信息量也有所增长，融合效果最佳。其它传统变换融合后的图像的在均值、方差、中值和熵值比较原始图像也有不同的增加，但总体上不如Gram-schmidt变换融合后的效果好。不同影像融合算法参数主成分变换，PANSHARP变换和Gram-schmidt变换的均值都在128附近，视觉效果较好；PANSHARP变换和Gram-schmidt变换的方差和信息熵明显高于其它融合方法，说明这两种融合方式所成的图像携带了大量信息，融合效果较好；Gram-schmidt变换的扭曲程度和偏差指数是所有融合方法中最小的，相关系数是最大的，说明此变换方法得到的图像与原始图像的匹配度较高，失真较小。结论和讨论主观和客观的评价表明:相对于传统的主成分变换融合、乘积变换融合、比值变换融合法，PANSHARP变换融合法和Gram-schmidt变换融合法较好的保留了光谱影像的光谱信息，提高了影像辨识度，增强了纹理特征，尤其以Gram-schmidt变换最佳；传统的主成分变换在细节特征方面有着自身的优势；根据不同实际情况的需要选择不同的融合方法，这对今后的特征信息提取和分类是非常有利的且重要的；对于高空间分辨率影像数据，Gram-schmidt变换融合是最为适宜的融合方法。展望基于特征和决策层的融合研究是遥感影像融合发展的重要方向；目前对于遥感影像融合的研究主要是基于象元的融合，对于特征和决策层的融合研究较少。高分辨率卫星数据在城市规划与监测中的应用城市遥感信息是城市重要的信息资源之一，遥感技术在城市规划与管理方面的应用目标可以归纳为：快速实现城市范围国土资源与生态环境的多层次、全方位综合调查；系统地研究城市资源与环境的空间分布规律及其相互联系、相互制约的关系，按不同层次、不同内容编制系列基础图件，客观、真实、系统地反映城市的建设成就和存在问题，为制定城市国民经济和社会发展的中长期规划、国土资源和生态环境的综合整治规划以及城市经济可持续发展规划提供科学依据。当前，高分辨率卫星遥感技术的发展已经到了一个前所未有的高度，如法国SPOT5和美国IKNOS、QuickBird卫星影像的地面分辨率分别达到2.5m、1m、0.61m，这使得卫星遥感技术突破了仅能进行定性分析的局限，而跨入定性和定量分析的新境界。

高分辨率卫星遥感制图在城市规划中的应用展示出非常好的前景。国家863计划信息获取与处理技术主题重大课题开展了利用分辨率为0.61m的QuickBird卫星影像进行城市大比例尺地形图的更新研究；利用高分辨率卫星遥感影像立体像对直接生成DEM数据，甚至可以进行大比例尺地形图的测绘。遥感与城市规划卫星遥感技术在城市规划实践中，主要针对具体应用需求，通过卫星地面站获取合适的覆盖范围的最新的城市卫星地图影像数据，利用遥感图像专业处理软件对数据进行辐射校正、增强、融合、镶嵌等处理。同时，借助城市应用区域现有较大比例尺的地形数据，对影像数据进行投影变换和几何精纠正，并从地形图上获得境界、城市、居民点、山脉、河流、湖泊以及铁路、公路等典型地貌地物信息和相应地名信息，进行相应的标注和整饰，制作城市数字正射影像图。为决策部门提供现实有效的支持资料。遥感与城市规划左图是为2005年北京奥运场地建设时城市规划所采集的快鸟卫星影像在规划咨询中的应用淄博市某项目规划咨询示意图（以2004年QuickBird影像为底图）

在规划设计的前期现状调查期间，高分辨率遥感影像图提供了大量的信息，以直观、详实的影像反映了许多实地踏勘中的盲点。同时，利用高分辨率影像图作为规划底图，使规划内容与周边环境的关系更加清晰，在旧区改造、历史古建筑保护、城市重点区域和地区标志性建筑的规划设计中可以发挥十分重要的作用。在规划设计中的应用

利用遥感技术可以经常检测土地利用类型的变化，这对于研究土地利用现状，为资源规划、管理、保护和合理利用提供科学的依据将发挥着越来越重要的作用。同时，随着近年来获取和处理遥感数字图像的明显进步，遥感信息将成为城市规划基础地理信息的重要组成部分，采用影像图作为规划成果的背景图，通过遥感应用机构提供的技术支持与服务，可以实现空间信息的查询、分析和应用，从而大大增加规划设计的深度和广度。1956年

1976年

1996年2003年12月17日广州大学城2005年7月18日广州大学城印度德里市2000年到2005年的变化监测南宁2002年和2005年影像对比卫星地图影像在城市变化监测中的应用实例在规划成果展示中的作用淄博市某小区(左图)和博山城区规划效果图(右图)

利用遥感像片生成的数字高程模型和数字正射影像可快速生成城市景观现状数字地面模型，在数字地面模型上可以随意添加、删除、修改建筑、树木、路灯等地面上看见得地物模型，参观者可以在虚拟现实的环境中自由行走、任意观看，给参观者带来难以比拟的真实感和现场感，使他们获得最真实的视觉感受在规划评审中的应用

以全数字摄影测量为基础的城市真实三维景观模型，能够充分利用现有遥感资料和地形资料，在较短时间内完成大面积地区的三维建模，通过贴房屋纹理和地表纹理，产生完全真实的场景。

由于城市三维景观具有直观性、可视性、实用性等的特点，并且包含了地理信息，不仅能为城市规划提供了较好的服务，而且能进行方案的评审。淄博市中心城区柳泉路某规