国土资源多源异构数据整合应用实例探讨课件

1、国土资源多源异构数据整合应用实例探讨目录1. 目前国土数据存在的问题2. 国土多源异构数据整合的重要性3. 国土数据整合的内容4. 国土多源异构数据整合的解决方式5. 基于FME的国土多源异构数据整合方案目前国土数据存在的问题当前国土资源信息化蓬勃发展，而各级国土资源信息化水平参差不齐，导致国土数据面临很多问题：数据分散、格式多样、通用性较差数据更新周期较差，数据现势性较差业务部门间分割严重，信息互通性较差数据质量格式多样坐标不统一标准不统一数据更新更新周期长联动更新不及时数据共享与交换业务数据库孤立存在业务数据库之间缺乏数据交换与共享机制目前国土数据存在的问题主要表现为：国土多源异构数据整合

2、的重要性(1) 国土资源电子政务运行平台和系统需要统一的“国土资源数据库”作为数据支撑。(2) 协调省市县各个部门之间的关系，使集成化国土资源基础数据库能够满足电子政务工程建设的需要。(3) 形成统一的国土资源数据标准，提高国土资源数据管理的科学化、规范化，提高国土资源基础数据的社会效益和经济效益。(4) 形成完善的国土资源数据信息共享、交换机制，加快国家、省、市等数据交换中心的建成。(5) 构建国土资源指标监管体系，通过指标分析，展示国土资源现状、规划、保护和开发利用水平，辅助领导决策。国土数据整合的内容(1) 建立和完善国土资源基础数据标准体系。(2) 汇交各级基础数据资料，对分散的国土资

3、源基础数据进行规范化和标准化处理，以及信息提取，实现多源、多格式、异构空间数据的转换。(4) 建立面向国土电子政务信息共享的数据交换体系。(5) 建立统一的国土资源空间数据库的管理和更新机制，实现数据入库、更新、备份和维护管理。(6) 实现中心基础数据库与各业务系统数据库之间的交换共享关系；(7) 建立国土资源指标监管体系，为政府提供国土资源信息的辅助决策支持和面向社会化信息服务。国土多源异构数据整合的解决方式1.直接进行空间数据交换，即把一个系统的内部数据文件格式直接转换成另一个系统的内部数据文件格式；2.利用标准数据格式进行转换，如DXF、DLG等；3.建立开放式的共享空间文件格式，如中国

4、地球空间数据交换格式(简称CNSDTF，标准编号：177981999)；4.空间数据互操作，利用“语义转换”，对空间数据进行整合。基于FME的国土多源异构数据整合方案1.国土数据建库质量检查方案2.国土数据库更新维护方案3.其它国土方案国土数据建库质量检查方案 北京安图数码科技发展有限公司 建库准备建库资源：源数据源数据规则或规范数据库数据库结构或建库规范软硬件环境国土数据建库质量检查方案源数据分析源数据采样分析数据库环境分析源数据规范与数据库规范的对比分析源数据规则或规范针对不同的数据建立不同的数据标准：例如，基础地理数据，土地利用规划等，形成对不同数据标准的检查和验收规范土地利用规划数据规

5、范国土数据建库质量检查方案数据检查细则国土数据建库质量检查方案国土数据建库质量检查方案流程设计图源数据规范检查入库操作数据库数据纠错通过未通过国土数据建库质量检查方案流程设计图-检查规范检查完整性逻辑性图形规则属性规则业务规则数据目录结构正确性文件名称正确性数据要素分类是否准确数据现势性情况空间数据要素完整性属性必填字段元数据的完整性图形自身逻辑错误图形间的拓扑关系图属一致性检查接边检查上下级交互检查值域、范围、规则检查属性字段结构国土数据建库质量检查方案流程设计图-纠错几何有效性纠错线面自交差线面伪节点面重叠、线重叠面缝隙图形的拓扑纠错悬挂线微小面处理微短线处理重复注记的叠加处理国土数据建库

6、质量检查方案流程设计图-入库入库操作数据字典要素分类要素接边图属关系数据字典自动关联要素自动分类分层要素自动接边图属自动重构国土数据建库质量检查方案空间数据检查与验证FME Workbench组件提供了超过400个不同类型的转换器。空间检查属性检查空间关系空间比较空间计算图属关系属性比较属性计算属性分隔数据检查与验证整体性检查完整性逻辑性自动修正目录结构文件名称要素分类坐标系统元数据空间结构字段结构接边检查检查模板的定义国土数据建库质量检查方案国土数据建库质量检查方案方案内容基于FME的数据建库有两个模式：单机模式和在线模式单机模式：FME定制检查项，用户可以根据需要对所有的检查项进行单项检查

7、、或者多项检查，另外为每类检查我们设置了参数控制。方便用户灵活的控制检查的精度、范围等信息。用户可以实现数据的批量入库操作，并在入库前或者入库后完成数据接边。应用案例：南京地籍数据数据在线检查、变更重庆/成都国土局测绘数据流程化变更国土数据建库质量检查方案国土数据库更新维护方案FME数据库支持支持的常见数据库格式有：Oracle （None-Spatial &Spatial）MS Server （None-Spatial &Spatial） DB2 （None-Spatial &Spatial） ArcSDE （Raster &矢量） Mysql （None-Spatial &Spatial）

8、 MDB （None-Spatial &Spatial）技术特点如下：支持空间数据的加载和迁移；支持数据模型的重构和变换；支持空间与非空间数据集成；支持空间数据转换和变换；支持坐标系统转换；支持空间数据检查；支持空间数据质量的保证与验证；国土数据库更新维护方案国土数据库更新维护模式基于FME的数据库更新维护有两个模式：单机模式和在线模式在线模式：用户通过网络完成数据的上传、检查、入库整体操作。检查结果可以下载，可以查看，甚至定位。入库操作可以自动完成接边、要素分类分层、重构等操作。IntranetOrInternet国土数据库更新维护方案数据更新基础库提取中心库基础库基础库提取提取基础库提取中

9、心库基础库基础库数据库数据库增量包数据库数据库文件级主动更新被动更新增量更新全量更新国土数据库更新维护方案数据管理增量数据的维护历史数据的保存数据仓库的ETL多源异构数据的汇交和集成应用案例：上海规划和国土局数据仓库建设成都国土一张图数据仓库建设国土数据库更新维护方案应用案例应用案例上海空间数据仓库建设技术特点如下：支持空间数据的加载和迁移；支持数据模型的重构和变换；支持空间与非空间数据集成；支持空间数据转换和变换；支持坐标系统转换；支持空间数据检查；支持空间数据质量的保证与验证；应用案例一应用案例上海空间数据仓库建设技术特点如下：通过网络进行空间数据的实时分发；支持分布式故障自动转移配置；支持Oracle的西文到中文字符集转换；对空间数据的服务提供日志记录；提供实时空间数据交换服务；支持海量空间数据的异构集成，支持实时、自动实现空间数据的动态更新；应用案例二应用案例成都国土一张图一张图建设的关键技术关键技术数据变化监测异构集成空间ETL一张图建设的关键技术数据变化监测基于商业数据库的现有工具Oracle CDC/Streaming GoldenGate一般的触发器/存储过程全记录集比对一张图建设的关键技术异构数据集成一张图建设的关键技术异构数据集成一张图建设的关键技术空间ETL-国土监管指标的抽取一张图建设的关键技术空间ETL-国土监管指标的抽取数据交换