DB4406-T 48-2024 空天地一体化社会治理数据采集规范

ICS35.020CCSL704406IDB4406/T48—2024前言 2规范性引用文件 3术语和定义 4缩略语 25数据采集要求 25.1数据采集过程 25.2数据采集对象 35.3数据采集方式 46数据预处理 46.1清洗 46.2转换 56.3分析有效性 56.4数据汇聚 67数据质量要求 67.1总体要求 67.2具体要求 67.3数据模型质量要求 78安全控制 78.1数据隐私 78.2数据安全 78.3网络安全 7附录A（规范性）地域数据采集要素信息 8附录B（规范性）天域数据采集方法 12参考文献 DB4406/T48—2024本文件按照GB/T1.1—2020《标准化工作导则第1部分：标准化文件的结构和起草规则》的规定起草。请注意本文件的某些内容可能涉及专利。本文件的发布机构不承担识别专利的责任。本文件由佛山市政务服务和数据管理局提出并归口。本文件起草单位：佛山市政务服务和数据管理局、佛山市南海区政务服务和数据管理局、佛山市南海区大数据产业协会、中城智慧（北京）城市规划设计研究院有限公司、佛山市南海区中城数字城市促进中心、佛山市南海区数据资源中心、佛山职业技术学院、佛山市南海区大数据投资建设有限公司、广东省电信规划设计院有限公司、广东柯内特环境科技有限公司、广东世寰智能科技有限公司、广东广宇科技发展有限公司、佛山市元亨利贞信息科技有限公司、佛山中科云图智能科技有限公司。本文件主要起草人：叶国彬、赵韶锋、张伟、黄伟、林惠冬、王彩萍、劳剑锋、万碧玉、马蓉、陈宇艺、姜栋、杜青峰、杨苑婷、王宇成、杜绮琳、李婉盈、王梅叶、彭建喜、陈嘉豪、李喜业、周琪、陈旭、邓俊健、张凯、孔繁洲、梁俊强、林颖奇、滕楠、黎柏允、陈慧玲、吴桂侠、杜永红、杨毅新、卢宏凯、张铭浩、邓超河、植挺生、梁晓峰、李琢、梁剑星、刘正坤、李文斌。1DB4406/T48—2024空天地一体化社会治理数据采集规范本文件规定了空天地一体化社会治理的数据采集要求、数据预处理、数据质量要求、安全控制。本文件适用于空天地一体化社会治理各系统的数据采集过程，其他信息化领域的数据采集过程可参考使用。2规范性引用文件下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中，注日期的引用文件，仅该日期对应的版本适用于本文件；不注日期的引用文件，其最新版本（包括所有的修改单）适用于本文件。GB/T2260中华人民共和国行政区划代码GB/T7408.1日期和时间信息交换表示法第1部分：基本原则GB/T28181公共安全视频监控联网系统信息传输、交换、控制技术要求GB/T32914信息安全技术网络安全服务能力要求GB/T33175-2016国家基本比例尺地图1:5001:10001:2000正射影像地图GB37300公共安全重点区域视频图像信息采集规范GB/T37988-2019信息安全技术数据安全能力成熟度模型GB/T41818信息技术大数据面向分析的数据存储与检索技术要求CJJ/T318城市信息模型应用统一标准HJ724环境基础空间数据加工处理技术规范3术语和定义下列术语和定义适用于本文件。3.1空域数据spacedata使用卫星对地面内对象采集的数据。3.2天域数据airdata使用低空飞行器对地面内对象采集的数据。3.3地域数据grounddata使用物联感知等设备对地面内对象采集的数据。3.4空天地一体化space-air-groundintegration空域数据、天域数据、地域数据的融合应用。3.5数据采集dataacquisition2DB4406/T48—2024从数据源中得到原始数据，通过标准化处理并转化为满足数据共享与利用需求的过程。[来源：GB/T36625.3-2021，定义3.2]3.6社会治理socialgovernance由相关管理部门主导、社会多主体参与的，依法对社会事务、社会行为、社会问题等进行引导规范，化解社会矛盾、维护社会秩序、促进社会和谐的活动和过程。3.7对象object城市部件和事件。注：城市部件指佛山市城市管理公共区域内的城市基础设施，包括公4缩略语下列缩略语适用于本文件。PNG：存储图像文件格式（PortableNetworkGraphics）MP4：数字多媒体容器格式（MPEG-4Part14）API：应用程序接口（ApplicationProgrammingInterface）HTTP：超文本链接（HypertextTransferProtocol）MQTT：消息队列遥测传输（MessageQueuingTelemetryTransport）KML：地理信息XML文件格式（KeyholeMarkupLanguage）TCP：传输控制协议（TransmissionControlProtocol）UDP：用户数据报协议（UserDatagramProtocol）FTP：文件传输协议（FileTransferProtocol）MAVLINK：微型空中飞行器链路通讯协议（MicroAirVehicleLink）TIFF：标签图像文件格式（TagImageFileFormat）JPEG：联合图像专家组（JointPhotographicExpertsGroup）JPG：一种图像压缩格式（JointPictureGroup）GEOTIFF：地理标签图像文件格式（GeosynchronousorbitTagImageFileFormat）SHAPEFILE：空间数据开放格式（ESRIShapefile（shpGEOJSON：地理空间信息数据交换格式（JavaScriptObjectNotation）BSI：双极信令接口（BipolarSignalingInterface）OSGB：开放场景图二进制格式（OpenSceneGraphBinary）AVI：音频视频交错格式（AudioVideoInterleaved）3DTILES：三维瓦片（OGC3DTiles）48kHz：48千赫兹（48KiloHertz）5数据采集要求5.1数据采集过程确定空天地一体化的对象，数据采集流程实现对数据的交换与提取、数据汇聚、数据安全加密压缩，并明确质量要求、安全要求，如图1所示。3DB4406/T48—2024图1数据采集过程数据采集过程应包括下列过程。——数据源选择：根据需要采集数据的数据源类型（如：文件、数据库、传感器等），确定数据源连接通讯的方式，明确采集标准范围及属性。可支持结构化数据和非结构化数据类型；可支持API、HTTP、MQTT等多种连接方式；可支持TCP、UDP、FTP、MAVLINK等通讯协议。——数据采集方式选择：数据采集分为人工采集和系统采集两种，通过分析相关数据源类型，根据可操作性、成本导向等原则选定数据采集方式。——数据预处理：对采集的原始数据进行清洗、转换标准化、分析有效性处理，确保数据的有效5.2数据采集对象5.2.1空域数据采集对象空域数据采集对象，包括但不限于：——农业数据：农田的田间测绘、作物监测、产量预测和灌溉等农业信息；——森林监测：森林的面积、树木种类、森林健康状况等森林资源信息；——灾害管理：地震、洪水、台风等自然灾害的信息；——气象监测：天气状况、气候变化趋势的气象信息；——生态环境：水源地、自然保护区、生物多样性等生态环境信息；——地表信息：地形地貌、地物类型、地表覆盖等地理信息；——事件：重大突发事件、紧急救援行动等信息。5.2.2天域数据采集对象4DB4406/T48—2024天域数据采集对象，包括但不限于：——城市建筑：城市中的建筑、房屋、道路等有关城市空间布局和规划的数据；——交通状况：城市中的道路拥堵情况、交通流量等交通状况信息；——公共设施：城市中的公共设施及运营状况信息；——生态环境：城市中的绿地、林地、河流等自然生态资源状态信息；——地表信息：城市中的地形和地表信息；——事件：城市安全监控领域，如消防救灾、环境监测、城市交通监管等信息。5.2.3地域数据采集对象地域数据采集对象，包括但不限于：——交通摄像头数据，采集要素信息按附录A的表A.1；——气象传感器数据，采集要素信息按附录A的表A.2；——环境监测传感器数据，采集要素信息按附录A的表A.3；——水资源监测数据，采集要素信息按附录A的表A.4；——火警和烟雾传感器数据，采集要素信息按附录A的表A.5；——卫星定位数据，采集要素信息按附录A的表A.6。5.3数据采集方式5.3.1人工采集方式通过人工收集和导入等方式获取数据。5.3.2系统采集方式空域数据采集方法通过卫星进行拍摄、扫描、检测的操作，由系统自动收集和录入数据的方式，包括但不限于：——卫星检测采集：卫星搭载多光谱成像仪、雷达、扫描仪等传感器对地理、大气、海洋水文等数据进行采集；——摄影测量采集：卫星拍摄的照片通过数字化处理各种要素信息，获取地形地貌、建筑物、林地、湖泊等各种地理信息。天域数据采集方法通过低空飞行器进行航空拍摄、遥感检测的操作，由系统自动收集和录入数据的方式，具体采集方法按附录B。地域数据采集方法通过地面物联感知设备进行拍摄或扫描或检测的操作，由系统收集和录入数据，发生事件触发物联感知设备进行地域数据采集，推送到后端的服务器；或根据策略调用地面物联感知设备进行实时采集地域数据。6数据预处理6.1清洗5DB4406/T48—2024对采集到的数据进行去重、处理缺失值、处理异常值、校正等操作，按下列方式进行操作：——去重：对采集到的数据进行去重，可根据数据的唯一标识进行识别并去除重复数据；——处理缺失值：识别并处理缺失的数据值，可通过填充（包括但不限于插值法、K邻近法、回归法等方式）或删除等方法进行处理；——处理异常值：检测和处理异常值，例如超出合理范围的数据点，可通过删除、替换或调整等方式进行处理；——校正：对采集到的数据进行校正，将不同时间、空间或传感器采集的数据进行配准，如去除噪声、补偿漂移、纠正误差、数据填补等方法进行处理，满足数据质量要求。6.2转换6.2.1空域数据转换对卫星的数据清洗后进行特征提取，并将其转换成统一的代码、格式类型，按下列方式进行操作：——栅格数据转换：栅格数据以像元为单位表示图像，常见格式有TIFF、JPEG等，应转换为标准统一格式，如GEOTIFF等；——矢量数据转换：矢量数据以点、线、面几何要素表示，常见格式有SHAPEFILE、GEOJSON等，应转换为标准统一格式，如POINT、POLYGON等；——多波段数据转换：多波段数据包含多个波段的数据，应转换为标准统一格式，如BSI等。6.2.2天域数据转换对低空飞行器的数据清洗后进行特征提取，并将其转换成统一的格式，按下列方式进行操作：——数据格式转换：将无人机采集的原始图像或视频数据转换为标准的数据格式，如JPG、MP4等；——栅格数据转换：栅格数据以像元为单位表示图像，常见格式有TIFF、JPEG等，应转换为标准统一格式，如GEOTIFF等；——矢量数据转换：矢量数据以点、线、面几何要素表示，常见格式有GEOJSON、KML等，应转换为标准统一格式，如SHAPEFILE等；——三维数据转换：三维数据是使用三维坐标系统组织的数据，常见格式有3DTILES等，应转换为标准统一格式，如OSGB等。6.2.3地域数据转换对物联感知设备的数据清洗后进行特征提取，并将其转换成统一的格式。按下列方式进行操作：——视频编解码：编解码标准包括H.264、H.265；——视频格式转换：视频数据转换格式包括AVI、MP4；——视频分辨率调整：分辨率调整包括720P、1080P、2K、4K；——图像应按业务需求进行格式和大小转换，应符合GB37300的规定；——行政区划代码应符合GB/T2260的规定；——日期和时间应符合GB/T7408.1的规定；——地理坐标数据转换应符合HJ724规定的坐标系经纬度。6.3分析有效性数据转换后，根据业务需求进行有效性分析，按下列方式进行操作：——数据来源审查：整理各数据来源的获取方式、数据量及存储大小，确保数据来源供数有效性；6DB4406/T48—2024——处理过程审查：对比各个数据处理过程中的数据量大小、数据格式核实、数据最后更新时间的指标，确保满足业务需求；——数据结果审查：对比历史数据和其他来源的数据，并确保数据结果的一致性及准确性，确保数据的时间戳正确、数据字段的命名一致。6.4数据汇聚数据分析有效性验证后，根据业务需求将数据汇聚至空天地一体化社会治理平台，数据汇聚应符合GB/T41818的规定。7数据质量要求7.1总体要求数据应遵循规范性、准确性、及时性、可信性、可维护性的原则，以满足业务需求。7.2具体要求7.2.1空域数据质量要求应符合以下要求：——卫星影像空间分辨率不低于0.8m；——卫星影像更新地图比例尺应不低于1:2000；——卫星影像坐标系应符合佛山2000坐标系的要求；——卫星影像波段信息至少包含红绿蓝三通道，影像为真彩色。7.2.2天域数据质量要求应符合以下要求：——无人机采集的图像像素应不低于1200万；——无人机采集的图像空间分辨率不低于0.5米/像素；——无人机采集图像的相位点与实际位置精度差异应低于1m；——无人机采集图像相机云台的俯仰角度为90度，误差应低于0.2度；——无人机采集的视频采样率应不低于48kHz；——无人机采集的视频分辨率不低于1080P；——正射影像精度应符合GB/T33175-2016中表1的规定。7.2.3地域数据质量要求应符合以下要求：——摄像机信息传输、交换、控制技术要求应满足GB/T28181的规定；——视频分辨率应不低于1080P；——视频帧率稳定性标准差小于5帧，变化范围在正负10帧之内；——视频丢帧率小于1%；——视频延迟时间小于100毫秒；——视频抖动方差小于10毫秒；——视频码率稳定性变化率小于5%；——数据误差率小于5%。7DB4406/T48—20247.3数据模型质量要求按业务需求建立数据模型，数据模型应符合CJJ/T318的规定。8安全控制8.1数据隐私8.1.1在数据采集前，应根据程序公示采集数据的区域，并提前告知公众采集数据的时间段及用途等。8.1.2在数据采集、处理和使用过程中，应严格遵守隐私保护相关法律法规，确保个人隐私数据不被滥用、泄露或非法获取。8.2数据安全应符合GB/T37988-2019中第6章的要求。8.3网络安全应符合GB/T32914的规定。8DB4406/T48—2024地域数据采集要素信息A.1交通摄像头数据采集要素信息见表A.1。表A.1交通摄像头数据采集要素信息1234%56个个789//次次////个个个//个A.2气象传感器数据采集要素信息见表A.2。表A.2气