DBJT45T 025-2021 综合交通运输政务数据资源共享交换技术指南

DBJT45I 2 3 6 8 8 9 本文件按照GB/T1.1—2020《标准化工作导则第1部分：标准化文件的结构和起草规则》的规定本文件起草单位：广西交通设计集团有限公司、广西壮族自治区交通运输信息管理李世锋、覃超生、刘海南、陈少锋、黄中章、周开制、兰建华、吴宇昊、邓定丰、韦诗莹、黄梦凡、1综合交通运输政务信息资源共享交换技术指南适用于广西交通运输部门信息资源管理人员、第三方政务信息系统与信息资源管理服务GB/T21062.2政务信息资源交换体系第2部分：GB/T38664.2信息技术大数据政务数据开放共享第2部分NTIP/T0301国家综合交通运输信息平台交通运输数据资源交换共享平台资源提供规范（试NTIP/T0302国家综合交通运输信息平台交通运输数据资源交换共享平台交换通道规范（试NTIP/T0303国家综合交通运输信息平台交通运输数据资源交换共享平台服务使用规范（试2用以描述各个信息资源的特征，以便于对信息资源的检索、定数据采集、传授、存储、处理、共享和销毁等各种存在形态演4.1以打造广西交通运输行业政务数据共享交换3按照交通运输政务信息资源涉及的行业领域及其运输方式进行划分的行业分类类目表见交科技发按照交通运输行业管理涉及的业务对信息资源进行划分的业务分类类目表见交科技发〔2017〕123按照交通运输行业管理业务行为的主题进行划分的主题分类类目表见交科技发〔2017〕123号中按照管理对象进行划分的管理对象分类类目表按照信息资源的类别进行划分的数据形态划分表见交5.2信息资源架构4影响约束反馈改变制度组织5.2.2数据管理框架周期的数据治理和数据安全。其中，本文件不对数据应用、数据治理做规范化要求。如图2所示。數据应用數据应用共享交换共享交换准备数据资源辅助决策应用数据治理公众出行服务数据标准管理数据交换管理元数据管理批量下载数据质量管理主题库主数据管理数据处理数据安全管理非结构化数据安全应急应用数据开放管养维护应用规划建设应用基础库业务库感知库数据采集数据存储结构化数据半结构化数据信息资源目录管理数据共享管理数据交换通道资源目录数据安全集成监控图2交通运输政务信息资源管理架构5a)结构化数据源。应具备不同的数据库连接技术，包括ODBC、JDBC、JNDI、DAO、OLEDB、c)非结构化数据源。应支持FTP、SFTP、SCP等文件传输协议，以实现非结构化数据源的连接。a)结构化数据采集。应适配常见的关系数b)半结构化数据采集。应支持Rest、SOAPc)非结构化数据采集。应支持FTP、SFTP、SC对于不同类型的实时数据，应采用不同的采集方式，具体b)对于实时流数据（如GPS定位轨迹数据流），应采用消息队列采集，满足写和读权管理要求，同时满足“一份缓存，多方消费”的要求。消息队列宜采用集群和负载均衡方式对于不同类型的数据，可采用不同的变化数据捕捉方式，具体2)数据库触发器方式。可在源数据库设置数据变化（增删改）触发器，当变化发生时，主3)变化标识字段方式。在数据表中设置可识别数据增量的字段，通过该字段取值变化捕捉4)全量对比方式。将数据从源数据库全量加载，再与上一采集周期的数据进行全量对比，b)接口数据。若接口具备主动推送变化数据功能，则使用其功能；若接口不具备主动推送变化c)文件数据。可通过扫描存储系统，以文件名、修改时间、创建时间等属性为标识，以发现变6a)对于数据库数据，应支持不同数据库之间的数据类型转换；b)对于接口数据，宜支持转换为数据库类型数据，宜支对于数据库数据，可采用数值加减乘除、列去重、字段拆分、字段合并、数值排序、字符串针对所有类型数据，宜适当采用压缩技术，减少数据存储消耗。可采用RAR、ZIP、GZIP、TAR等多a)对于使用频率高、活跃性高、访问时效要求高的偏热数据，应采用关系数据库存储管理，宜b)对于使用频率低、活跃性低、访问时效要求低的偏冷数据，可将结构化数据输出为固定格式b)对于使用频率低、访问时效要求低的偏冷数据，宜采用离线数据的存储技术。在信息资源存储的基础上，应在逻辑上构7电子证照感知库路网运行车辆动态港口运行组织机构基础库 从业人员业务库主题库基础库、业务库、感知库和主题库存储的数据内容具体如下：a)基础库：存储交通运输行业各类对象的基础信息数据，包括人员、组织、运输装备、基础设b)业务库：存储各项交通运输政务业务的办理过程、进度等事件信息；c)感知库：存储路网运行数据、航道运行数据、港口运行数据、车辆动态数据、船舶动态数据d)主题库：存储各类主题数据，主要引用基础库、业务库、感知库的数据加工而成，如违法违6.4.1数据源监控87共享与交换信息资源目录管理应包括目录编目、目录注册、目录发布、目录维护等内容。主要业务流程如图4目录编目a)提取特征信息：提供系统自动编目和人工编目两种方式。按照不同的维度对信息资源进行编b)赋值：对数据和服务资源元数据中的分类信息进行赋值，系统根据交通运输信息资源目录体c)唯一标识符赋码：对信息资源和服务组件进行唯一标识符赋码。按照国家标准，支持唯一标9d)用户权限验证：目录权限管理是为不同用户级别进行授权。满足不同用户对目录浏览、检索目录注册主要是方便地实现数据和服务资源目录内容提供者向目录体系注册数据和服务资源元数a)提交：提供者将需要对外发布的信息资源和服务组件资源进行相关元数据描述。系统能提供自动注册工具，提供者根据核心元数据标准要求构建新项目数据库，目录注册管理模块可直a)发布。编制好且经过数据提供方审核确认的目录，可由目录管理方选择发布，发布后应根据目录共享属性、开放属性展示到共享门户、开放门户等，应支持单条目录发布和批量发布两b)退回。对于已发布的目录，应支持退回功能，同时应从共享门户、开放门户的展示中撤销，.1目录维护管理系统的主要作用是保证目录服务系统的可用性，包括数据和服务资源目录库.2系统应支持管理者能够通过系统保存、备份、注销与恢复信息资源目录内容。目录内容的开始图5综合交通运输信息资源共享管理业务流程7.2.2技术功能面向数据共享管理用户，为满足支撑交通运输部门相互之间的数据共享管理工作，应包括以下功能：a)共享资源发布。共享管理用户应基于信息资源目录发布的信息资源实现共享。发布时应与目录中确定的共享类型、共享方式等保持一致。共享发布的类型应只包括无条件共享和有条件共享(含特定范围共享)两种，有条件共享的宜支持定义共享条件。共享方式应包括但不限于：网页浏览、接口调用、数据下载及通过交换平台传输；b)共享申请与审核。信息资源需求用户通过自治区级平台申请获取资源后，管理用户通过平台审核，应包括通过与驳回两类操作，驳回情况下必须具备填写驳回理由功能，通过情况下，应具备登记交换内容、交换频率、限制条件(如某区域、某时段)等信息；c)审核规则设定。平台宜具备设置共享审核时限要求及自动审核规则功能，如超过一定时间后自动通过审核、经过多次提醒后自动通过审核、超时不操作则暂停该用户所属单位数据获取d)共享规则定制。共享管理员根据申请情况定制共享规则，在接到数据共享申请后，系统根据规则可自动执行审批。如：对无条件共享数据，则可自动审批。对于特定范围共享的数据，可在依据申请用户的权限进行判定，符合条件的自动审批，不符合预定条件的提交管理员审e)使用反馈与反馈处理。数据使用方将共享信息资源使用情况反馈至平台运维方或者数据提供f)用户管理。应支持共享管理相关用户的维护，包括增加新用户、修改用户信息和权限、删除g)共享信息管理。共享管理模块应记录信息资源的基本信息、共享对象、共享时间等信息，同7.3共享服务数据提供方提供满足数据需求方的多种数据服务，具体实现方式可包括：WebService接口、数据库接口、专用API、批量下载以及数据交换服务等。广西综合交通运输信息资源共享服务应遵循共享服务业务流程如图6所示。开始结束图6综合交通运输信息资源共享服务业务流程7.3.2技术功能a)服务发布。服务提供方向平台提供资源后，依据提供的资源进行服务发布；b)服务申请。服务使用方依据信息资源目录查询到服务提供方已发布的服务，根据业务需要填c)服务审核。服务提供方需要对填写的服务使用申请进行审核，审核通过后，提交给服务使用d)服务授权。服务提供方有两种服务授权方式，一种是根据服务使用方提交的申请授权；另一种是主动授权给服务使用方，服务授权支持永久授权和按照时间段授权。当服务提供方发布服务后，已明确服务的使用方，则可直接授权；当服务使用方对需要使用的服务没有被主动e)服务使用。服务提供方授权成功后，服务使用方即可根据使用方案使用服g)反馈复核。服务提供方对服务使用方的服务使用情况反馈进行复核，用于改善服务质量。可扩展消息传输和流传输的交换方式，以支持动态数据（如传感器数据、北斗或GPS数据等）的实时传a)静态数据传输通道应实现文件格式数据的传输，可兼容数据库连接等交换传输。应实现端到端的高效、可靠、安全、便捷的数据传输，跨网域、跨系统之间应通过前置机（亦可称作交换前置节点）作为数据中转缓冲，前置机的节点管理功能应至少支持文件类数据传输的管理b)静态数据文件传输通道应支持平台无关、自主路由、多点投放的功能，并根据需要配置专用通道，实现特定数据内容高效、优先传输。自治区级交换传输通道应与交通运输部平台保持c)动态数据传输通道应优先选择消息队列中间件方式，应满足实时流数据量大、实时性要求高请与审核、交换规则定制、交换通道管理、交换日志使用方案(路务a)交换节点部署与注册。交换管理系统应具备在不同前置机部署交换节点的功能，交换节点定位为构建不同节点之间通道，完成数据交换任务，其受交换管理系统统一管理、分配通道与b)交换通道申请与审核。交换通道申请内容应包括：交换相关节点、更新频率、限制条件(如某区域、某时段等);任何数据交换均应在通道申请通过，获取传输资源后进行，周期性交c)交换规则定制。通过交换申请后，应支持平台管理员定制交换规则，系统可根据规则自动执务数、繁忙程度、传输速度等）、正在传输的任务（任务名称、传输内容、开始时间、完成），e)交换日志管理。对交换通道的使用情况进行记录，交换日志应至少包括：交换的时间、交换的业务授权码、交换的信息资源内容、交换的结果、交换的数据量、交换的源节点和目的节1234联机查询任务的开始时间，格式为“YYYY-MM-DDhh:mm:ss.nnn”5即查询任务结束，可输出结果至交换界面的时间，格式为“YYYY-MM-DDhh:mm:ss.nnn”6789若数据库连接成功，留空；若连接失败，则填写数据库管理系统的返回原因数据表查询成功，留空；查询失败，则填写数据1234文件下载任务的开始时间，格式为“YYYY-MM-DDhh:mm:ss.nnn”5下载任务结束时间，格式为“YYYY-MM-DDhh:mm:ss.nnn”6789因12345接口调用任务的开始时间，格式为“YYYY-MM-DDhh:mm:ss.nnn”6接口调用后，返回结果的时间，格式为“YYYY-MM-DDhh:mm:ss.nnn”789因123456789任务开始时间，格式为“YYYY-MM-DDhh:mm:ss.nnn”任务结束时间，格式为“YYYY-MM-DDhh:mm:ss.nnn”123456789任务开始时间，格式为“YYYY-MM-DDhh:mm:ss.nnn”任务结束时间，格式为“YYYY-MM-DDhh:mm:ss.nnn”信息资源名称来源系统来源数据库信息资源摘要式行业分类业务分类管理对象分类主题分类信息类别分类类项目细目信息资源提供方提供方内部部门提供方联系方式信