东北亚气象和相关数据收集规范

1东北亚气象和相关数据收集规范本文件规定东北亚气象和相关数据收集内容、收集流程、存储方式、备份与归档。本文件适用于对东北亚气象数据和相关数据的收集和归档。2规范性引用文件下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中，注日期的引用文件，仅该日期对应的版本适用于本文件；不注日期的引用文件，其最新版本（包括所有的修改单）适用于本文件。GB/T40153-2021气象资料分类与编码GB/TT233-2014气象数据库存储管理命名GB/TT129-2011气象数据传输文件命名3术语和定义下列术语和定义适用于本文件。3.1东北亚NortheastAsia东北亚指东亚东北部地区，其范围可包括中国东部、朝鲜半岛、日本列岛、蒙古、俄罗斯远东地区3.2气象数据meteorologicaldata使用各种观、探测手段获取的地球表面和地球大气的状态、现象及其变化过程的记录，及以此为基础利用各种技术方法加工处理生成的各类衍生资料和加工产品。[来源：GB/T40153-2021,3.1,有修改]3.3相关数据relatedindustrydata指与气象领域（或科学）相关的行业数据和统计信息。3.4结构化数据structureddata由二维表结构来逻辑表达和实现的数据，主要通过关系型数据库进行存储和管理。3.5非结构化数据unstructureddata与结构化数据相对的不适于由数据库二维表来表现的数据。4收集内容24.1气象数据收集内容主要包括地面气象数据、高空气象数据、海洋气象数据、气象辐射数据、农业气象和生态气象数据、数值预报产品、大气成分数据、科研数据、天气雷达数据、卫星气象数据、社会化观测资料、气象服务产品，参见附录A中的表A.1。4.2相关数据收集内容主要包括民政、海运、水文、环保、交通、航空、农业、电力等行业部门数据，参见附录A中的表A.2。4.3数据形式数据存储介质的主要形式为纸质或电子。5收集流程5.1纸质介质数据将收集到纸质介质数据根据数据种类、性质和用途不同采取不同的方式进行整理，并梳理整理后数据的归档清单，以方便后续归档工作。纸质介质数据收集流程见图1。图1东北亚纸质介质数据收集流程5.2电子介质数据收集到的电子介质数据包含结构化数据和非结构化数据。根据结构化数据类型配置相应的存储结构并入库，制定完善的备份归档机制存储非结构化数据，对电子介质数据进行全生命周期的存储管理。电子介质数据收集流程见图2。3结构化数据非结构化数据图2东北亚电子介质数据收集流程6存储、备份和归档6.1数据存储6.1.1纸质介质数据纸质介质数据应为原件，字迹清楚、图样清晰、图表整洁，介质外观无破损。纸质介质数据为外文版或少数民族文字的，有中文译文的应与中文译文一并归档；无译文的外文或少数民族文字材料应翻译成中文，中文翻译件应由翻译责任人、审核人签署并与原文一同归档。6.1.2电子介质数据结构化数据使用关系型数据库系统进行存储管理和存取操作，如存入MySQL、PGsql等。非结构化数据按照数据原始的文件数据格式存储。采用分级存储策略，以文件形式存储在特定根目录下，最后一级的目录中建议包含的实体文件个数不超过十万个。并将文件基本属性、存储路径等描述信息以结构化数据存入数据库中。各类气象数据存储文件名由类型编码和自由字段组成。类型编码均用相关英文缩写统一编码，参见附录B中的表B.1和表B.2。自由字段由数据生成中心自行定义和扩展。类型编码和自由字段之间用“-”分隔。6.2数据备份6.2.1纸质介质数据4对重要的纸质介质数据进行扫描或复制，备份数据实行异地异质存储。6.2.2电子介质数据以本地离线备份作为备份系统的主要架构，采用完全备份、增量备份相结合的备份策略。完全备份是对新收集到的所有数据和对应结构的完整备份；增量备份是指备份自上一次备份以来的新增或发生变化的数据。6.3数据归档6.3.1纸质介质数据归档的纸质介质气象数据必须齐全、完整、无损，并有详细的归档清单，存放在专用的档案库房。6.3.2电子介质数据采取离线归档方式，依据东北亚气象和相关数据种类、时间、来源等在存储介质中逐级建立文件夹，分门别类、集中有序地归档东北亚气象和相关数据。归档目录设计参见附录B。5东北亚气象数据、相关数据表A.1东北亚气象数据内容利用各种观测手段获得的陆地近地面边界层以下大气和地表面气象条件的东北亚地面气象观测资料及其综合分析衍生通过各种地基和空基观测手段(如探空包括地球表面上空温度、湿度、气压、风等气象要素垂直廓线和大气电磁场基于浮标、船舶、海岛、海上平台等多种观测平台进行气象观测获得的东北亚描述海洋和近海面大气状态的气象资料包括海上船舶、浮标或海洋类观测站观测的海面温压湿风等气象要素和海表温度、波浪、涌浪及深海温度、盐度、海通过各种观测手段获得的东北亚辐射资包括总辐射、散射辐射、直接辐射、净照度、空气温湿度、土壤温湿度、利用当前及历史综合气象观测资料，采用数值计算的方法，求解东北亚代表天气演变过程的流体力学和热力学方程包括各等压面高度、温度、U风、V风、相对湿度、垂直速度、散度、比湿、水汽通量、水汽通量散度、假相当位温、涡度平流、温度平流等；海平面气压、降水量、2米温度、2米露点稳定、10米通过地基大气成分观测站、地基遥感、飞机等观测手段获取的东北亚温室气体、降水化学、气溶胶、臭氧等大气成在气象科学试验和专项气象科学考察中观测获得的或由此加工生成的东北亚各6表A.2东北亚气象数据内容（续）通过地基天气雷达探测获得的东北亚气通过天基平台(气象卫星)搭载的各种观测仪器探测获得并由地面系统接收处理生成的东北亚卫星云图、遥感图像和空通过社会化观测获得的东北亚各类气象基于气象服务之目的而制作的、可直接包括天气、气候、农业和生态气象的监测、分析、预报、预测、预警产品和专表A.3东北亚相关数据内容东北亚各区域人口、经济、农业等普查东北亚主要河流流域水利水文气象资料、隐患点信息、地理信息数据、经济东北亚城市环境空气质量监测、温室气东北亚公路及高速路段的气象要素和路包括气温、风、能见度、降水量、路面东北亚机场区域内天气情况的实时监包括作物种植面积、产量、农产品价格东北亚发电厂数据、电网数据、用电数包括发电厂发电量、能源生产情况、各表A.4东北亚气象数据统一编码表A.5东北亚相关数据统一编码8归档目录设计说明存储目录设计具体说明如下：/根目录/{大类简码}/{数据属性[加工中心]/[数据种类]/[加工系统]/[数据等级]/[数据代码]/[数据格式]/[空间属性]/[要素]/[时间属性]}（1）{大类简码}：某类产品简码。（2）{数据属性}：必选，可由多个属性组成多级目录但至少包含一级目录。在附录中为二级至七级目录。[加工中心]：可选，可为国外加工中心的名称，如ECMWF、KWBC、CMA等，也可为中国气象局下属单位名称；[数据种类]：可选，雷达类型、卫星标识、科考实验名称、数值预报模式类型等；[加工系统]：可选，如模式名称、雷达数据加工系统名称；[数据代码]：可选，如卫星数据名称、雷达数据种类等；[数据等级]：可选，如卫星、雷达数据级别L1、L2、L3等，以及数据的版本V1、V2等；[数据状态]：可选，如业务运行、试验运行等，详见表2。[数据格式]：可选，包括：MICAPS、GRIB、NetCDF等；[空间属性]：可选，包括：区域范围、行政范围、台站号或层次、空间分辨率等；[要素或仪器名称]：可选，如果是仪器可为一个要素或多个要素组合；[时间属性]：可选，可多级，如时间分辨率、YYYY、YYYY/YYYYMM、YYYY/YYYYMMDD、YYYY-YYYY(如标准值的起止年份1981-2010）。存储目录样例：/RADA/DOP/L2/OBS/YYYY