海量多波束水深数据快速处理及质量检查方法

1、海量多波束水深数据快速处理及质量检查方法(哇海刚张光华卢之杰肖志峰肖静环)摘耍：针对冃前多波来水深数据的管理与应用存在的问题，提出了一种基于水深 数据块管理的多吋相水深数据组织与管理方法，利用水深数据快速压缩方法来构建水 深金字塔模型，采用了实时投影、动态压缩和实时等深线牛成技术來提高海量水深数 据快速可视化效果。同时还对水深浅点的查找方法进行了探讨，并介绍了基于单源和 多源数据的水深数据质量检查方法。最后设计并开发了 “水深信息悖理系统”，该系 统在渤海航路扫测中得到了实际应用，取得了良好政策。关键词：多波来水深；海量数据管理；动态压缩；实时投影；实时等深线生成； 质量检査中国分类号：p33

2、5 文献标识码：a 文章编号:1001 - 4179(2008) 06 - 0018 -031概述随着测绘技术的发展，多波束测深技术在航路测量中的应用越来越广泛。多波朿 测深仪最大的特点就是测点多、全覆盖、精度高、能够标准全面地反映水下地形起伏 变化情况，但是产生的数据屋巨大，通常会形成tb级的数据量。多波束测量数据后处 理软件的应用十分广泛，然而到目前为止，人部分软件都集中在对原始水深的预处理 和成图水深的编辑:管理上，对原始水深资料预处理后的海量数据的管理还没有过多的 研究，虽然h前在海量矢量电子地图和影像数据管理方法的研究己经比较成熟，但是 多波束水深数据具冇不规则性和“补丁”式更新的特

3、点，如何将数据进行冇效的组织、 管理，并在有限的计算机硕件下进行快速视觉化成为海量多波束水深数据管理的关键 问题。另外，因其准确性直接关系到海上舰船航行的安全，因此如何对其质量进行有 效检查和控制也是必须关注的问题。本文正是针对以上问题展开了研究和讨论，提出 了一种新的海罐多波束水深数据的组织管理方法，并重点研究了海量多波束水深资料 快速可视化技术、水深浅点查找和基于单源和多源水深数据质量检查方法，最后根据 上述理论和方法设计了 “水深信息管理系统”，该系统已在渤海湾航路扫测屮得到实 际应用。2海量多波束水深数据的组织与管理海量多波束水深数据的组织与管理是多波束水深数据应用处理的关键问题，高效

4、 的数据组织与管理是多波束水深数据应用的基础。由于多波束水深数据不仅数据巨人、 数据文件多，而且水深数据在时刻变化，需定期进行更新，且每次更新的区域都不尽相同。因此，如何对海量的、多时相的、不规则更新的水深数据进行整体的冇效规划 组织非常重要，同时数据的整体规划述要考虑其通用性、灵活性及扩展性。2. 1多时札（水深数据纟r织与管理在实际作业中，往往只需更新部分数据，这就造成了多个时期水深数据并存的局 面，形成了多吋相的水深数据。从管理的角度看，多吋和水深数据管理主耍有两种方 式，见表1所示。表1多时相水深数据的管理及优缺点管理方式方法优点缺点基于数据更新 域的时间版本 管理毎个更新域数据都单独

5、 建库,进行分块存储，建 立测区级和数据块两级 累引，利用索引编码进 行数据查询。数据处理时非 常灵活，而且 节约存储空 间。齡查制调度时比较复 杂威据可视化和分发 的速度瓯基于水深数据库的时间版本管理每次更新后的数据以整 个溜完整的形式更新 亟新建库，各数捱库单 独进行数摇维护和管 理。数据查询速度 非常快。娠冗余，需要占用大 莹的存储空间。本文在综合上述两种管理方法的特点的基础上，采用了一种新的方法，即基于水 深数据块的时间（时相）版木管理方法來管理多时相水深数据。此种管理模式的主要 原理是：将各个时期的水深数据按统一地理格网划分，对划分后的每一个水深数据块 进行吋空编码（见图1）。对于多

6、时相水深数据分析和统一的存储來说，基于数据块的时间版本管理方式可 以直接存取其屮的任一水深块，进行统一的调度和管理，同时水深数据的更新和增量 存储以及其它的应用会更加灵活和方便。2.2基于lod思想的水深数据金字塔模型的建立鉴于多波束水深数据海量性的特点，引入了 lod技术思想，通过建立水深数据金 字塔模型來提高水深数据的实时缩放显示的速度，而且可以根据不同的显示需要调用 不同密度的水深数据，达到快速漫游的目的。水深数据金字塔采用的是瓦片金字塔的 构建原理，分块的瓦片金字塔模型能够减少数据访问量，提高系统的输入输出执行效 率，从而提升系统的整体性能，见图2。(xoyo)ii f 0 1 1 f

7、 b i i i m «1111 1 10004 " .0004<>01004wdojc 0wo010c50005wm0w?.， * q005d03001r00070007(1010070»7<iqw2 .ooomoiomooca_jwotd020ct000t<f03003oow> t 一 vjoiodoicw00!0d030040011001i<m)3ani wl b ) i i 0 i ? f i i图1基于水深数据块的数据存储模式相人/ /mi图2水深数据金字塔结构采用水深资料构建金字塔时，首先把原始资料作为金字塔的底层即

8、第0层，并对 其分块形成第0层块矩阵。在第0层的基础上进行水深压缩得到第1层，并对其分块得到 第1层块矩阵，如此下去构成水深数据金字塔模型。3海量多波束水深数据的快速可视化为取得理想的实时交互性能，在实现海最多波束水深数据的快速可视化过程屮， 我们在使川双缓存机制、数据的动态装载和卸载等策略來捉高水深数据的实时、快速 调度效率的基础上，重点对水深数据选取、显示主要采取的实时投影技术、动态压缩 和实吋等深线牛成术进行了探讨。3. 1实时投影技术在水深数据显示吋，由于航路担测的跨度大、地域广，使用经纬度直接显示变形 太大，需要进行处标变换，而且不同航路数据的地标系统也不尽相同，为了保持原始数据的完

9、整性和实测时投影后的坐标，在显示时采用了实时投影技术。实时投影是基于所冇的坐标均存冇经纬度（通过多波束测深仪得到的坐标首先就 是经纬度），在显示时，更需要设置参数、选择投影方式，然示在显示缓存屮取出水深 点，进行投影变换，最后进行显示，同时也可以在显示后，更换投影方式或者投影参 数，然后重新进行投影变换，以达到耍求显示的效果。本文主要涉及墨卡托投影、高 斯-克吕格投影、utm投影3种投影。3.2水深数据动态压缩在水深数据显示时，采用动态压缩技术主耍出于4个方而的考虑：多波束测深 仪在物理存储时是按“线”存储，分块压缩操作也是针对“线”进行的，水深数据显 示或成图需要“由线到面”的转换；在牛成金

10、字塔时，分别在每块的内部进行压缩, 没有考虑块边缘点的压缩情况，导致块与块的交界处点的密度与块内部不同，需要通 过统一压缩半径的动态压缩，实现屏幕显示点密度的均匀化；在动态调度数据时， 由于耍进行无级缩放，所以很多时候调用的数据密度都大于当前耍显示的密度，于是 需要进行实吋的压缩；有吋须根据不同需要进行显示，如不同吋相的水深数据的重 迭显示或不重迭显示（按最浅原则显示或按最近时间显示），或者改变水深显示的密度, 这也需要动压压缩实现。动态压缩，即在显示时，根据需要和相应的要求对显示缓存中的所有的水深点进 行统一选取综合。在此压缩分为两级：一级为测线级的压缩，该级压缩为默认压缩， 其主耍h的是为

11、了实现水深点的基本显示即实现“由线到面”的转换；二级为项h级 压缩，该级压缩是可控的，可以选择重迭显示或不重迭显示（按最浅原则显示或按最 近时间进行压缩显示）。水深数据动态压缩效果与非动态压缩效果如图3与图4所示。通 过対比看出，动态压缩可以达到很好的显示效果。比例尺1:3459比例尺i - 86*1图3无级缩放时动态压缩效果比傅尺u3459ttftr i 216图4无级缩放时非动态压缩效果3. 3实时等深线生成实时等深线生成主要是基于当前显示的数据即显示缓存小的数据可实时生成等 深线。由于每次显示的数据量非常有限，所以能够快速绘制出当前屏的等深线，其最 人好处就是能够和当前显示的水深数据完全

12、吻合，不会岀现因预先根据最低层资料主 成而产生的失真效果。同一区域无级缩放时实时生成等深线效果如图5所示，漫游时实 吋牛:成等深线效果见图6。图5同一区域无级缩放时实吋生成等深线效果实验证明，实时等深线生成不仅可以节约数据预处理所用的时间，根据感兴趣区 域或坐标的变化实时生成等深线，非常灵活，而且实时生成的等深线可以与当前水深 数据完全吻合，同时对解决不同投影间等深线的拼接问题具有良好效用。图6连续区域漫游吋实时生成等深线效果4多波束水深资料的质量检查4. 1基于加权平均值的浅点自动查找浅点是水深数据的关键数据，它肓接关系到航行安全，因此快速杳找出水深数据中的所冇浅点，并定位到该点加以确认，是

13、非常有必要的。木文采用了一种加权平均 值的比綾方法，即对每个水深点，首先求出落入以给定点（do）为屮心，以给定半径 的圆的所有水深的加权平均值depth平，然后求出该点的值deptho与均值depth平的 差值与给定的阀值e0比较，若&©0人于0则为浅点。具体算法见下式：depth f=习庆pg xd)/»i；e = depth、f depths式中depthi （i = l, 2,，n）为水深点的深度值；di为水深点距do的距离。该方法能够求出所有可疑的浅点，加以人为的判断，可以求出所有的浅点，见图图7浅点查找结果示意4.2基于单源水深资料的质量检查基于单源资料的

14、水深数据质量检査主耍是资料的口检査和分析，主要包括统计分 析、等深线分析、剖面分析等方法。在统计分析中，通过统计给定水深点和落入其“影 响圆”（半径给定）的其它水深点的深度差范围的百分比的分析就可以知道该点是否 为异常点；等深线分析中，通过等深线剖面曲线得到的峰值和谷值可判断该段航路的 通行情况，同时也可以根据illi线的变化程度來人致判断该段航路是否有异常；剖面分 析中结合二维显示图，很容易发现存在一个杲常点或者是浅点，如图8在画剖而的参考 线冇一个水深为20. im的点（图中黑点），而它周围的水深都为25m左右，那么可以确 定该点为浅点或者为异常点。4.3基于多元数据的水深数据质量检查基于

15、多源资料的水深数据质量检查主耍是通过不同源的数据比对来分析水深数 据的质量情况，主要包括多剖而分析、互差统计分析、差值dem和透明迭加显示方法。 多剖面分析通过多条剖面illi线的对比分析，直观地得到航路水深数据的准确情况，主 要用于有观判断数据的准确度，有-时也用于对航路变化趋势的分析；互羌统计分析采川一种“影响関”的方法，算出基准点和i员i内点水深差值，形成一个水深互差文扌当进 行深度互差统计分析，在差值图上可以非常宜观地判断水深数据测量的准确度，并且 可以分析和航路的变化趋势；差值dem通过多个时相水深数据求差得到。通过差值dem 的可视化可以直观判断不同时相间数据的吻合程度。图8单剖面

16、图进行剖面分析5水深信息管理系统渤海超大型船舶航路招测工程是我国首次使用多波束测深仪进行的大规模航路 扫测，本次航路招测覆盖1227km2,测线里程达6500km,共生产多波束水深资料达1tb。 针对渤海超人型船舶路打测工程的需求，开发了渤海航路扌i测“水深信息管理系统”， 主要用于海量多波朿水深数据的管理与应用。系统主要包括两个子系统。即二维显示 与分析了系统和三维可视化与分析了系统。系统的主要功能界面见图9、10、11和图12。图9二维显示与分析子系统图10三维可视化与分析子系统图11剖面对比分析<r-图12三维航路显示卜的剖面分析6结语木文资料针对冃前多波束原始水深数据管理缺乏的问

17、题，捉出了一种冇效的管理 海量多波束水深数据的方法。同时，针对目前在海量水深资料屮浅点杏找困难的问题， 提出了基于加权平均值的浅点快速查找方法、基于单源数据和多源数据的质量检查方 法，对多波束水深数据的质量检查収得了很好的效果。根据本文研究方法开发的系统， 已在渤海湾航路扫测中得到应用。下一步的工作是根据实际的应用需求，对多元数据 的质量检测方法进行深入研究和完善，并进一步推广应用。参考文献：1 赖仲淄，方兆宋，陈金火.em120型多波束测深系统及在深海测量中的应用. 海洋测绘，2006, 26 (2).2 张界彪.多波束勘测的特殊地形处理.海洋测绘，2004, 24 ( 3).3 刘经南，赵建虎.多波朿测深系统的现状和发展趋势.海洋测绘,2002, 22( 5).4 王俊，张文诗，王建涛.多国幅海量数据电子地图快速显示的研究与实现.测 绘工程，2003, 12 ( 3).5 许涌，万国龙.海量图像数据快速显示技术.计算机工程与设计,2003,24( 6).6 朱庆，李徳仁.多波束测深数据的误差分析和.武汉测绘科技大学学报，1998, (1)： 1-4.7 herlihy dr,et al. filtering erroneous soundings from multibeam surveydate.intematinal hydmgraphic review