月球与行星探测数据质量检验要求_第1页
月球与行星探测数据质量检验要求_第2页
月球与行星探测数据质量检验要求_第3页
月球与行星探测数据质量检验要求_第4页
月球与行星探测数据质量检验要求_第5页
已阅读5页,还剩11页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

ICS07.040

CCSA46

中华人民共和国国家标准

GB/TXXXXX—XXXX

`

月球与行星探测数据质量检验要求

Specificationsforqualityinspectionoflunarandplanetaryexplorationdata

(点击此处添加与国际标准一致性程度的标识)

征求意见稿

2022年11月

XXXX-XX-XX发布XXXX-XX-XX实施

GB/TXXXXX—XXXX

前言

本文件按照GB/T1.1—2020《标准化工作导则第1部分:标准化文件的结构和起草规则》的规定

起草。

请注意本文件的某些内容可能涉及专利。本文件的发布机构不承担识别专利的责任。

本文件由中国科学院提出。

本文件由全国空间科学及其应用标准化技术委员会(SAC/TC312)归口。

本文件起草单位:中国科学院国家天文台。

本文件主要起草人:左维、李春来、刘宇轩、熊雅颖、张舟斌、曾兴国、高兴烨、刘建军。

II

GB/TXXXXX—XXXX

月球与行星探测数据质量检验要求

1范围

本文件规定了月球与行星探测数据质量检验原则、检验内容、检验要求和检验流程。

本文件适用于月球与行星探测数据的质量检查和质量评定。

2规范性引用文件

下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中,注日期的引用文件,

仅该日期对应的版本适用于本文件;不注日期的引用文件,其最新版本(包括所有的修改单)适用于本

文件。

GB/T33996-2017月球探测数据产品分级与命名

GB/T33997-2017月球与行星数据产品格式规范

GB/T33998-2017月球信息元数据

3术语和定义

下列术语和定义适用于本文件。

数据集dataset

可以识别的数据集合。

注:通过诸如空间范围或要素类型的限制,数据集在物理上可以是更大数据集较小的部分。从理论上讲,数据集可

以小到更大数据集内的单个要素或要素属性。一张硬拷贝地图或图表均可以被认为是一个数据集。

[GB/T19710-2005,定义4.2]

数据质量元素dataqualityelement

产品满足用户要求和使用目的的基本特征。

数据质量评价指标dataqualitymeasure

定义数据质量元素的评价等级参数。

单位产品item

可以单独描述和考察的对象。

注:单位产品可以是数据集的任何部分,如要素、要素间关系、要素属性或它们的组合。

[GB/T2828.1-2003,定义3.1.4]

样本metadataentity

一组说明数据相同特征的元数据元素。

注:可以是单个实体,也可以是包含一个或多个实体的聚合实体。

1

GB/TXXXXX—XXXX

[GB/T19710-2005,定义4.7]

样本sample

在抽样检验中,取自一个批并且提供有关该批的信息的一个或一组单位产品。

抽样检验samplinginspection

按照一定的抽样方法,从数据集中抽取样本数据进行的检验。

全数检验fullinspection

对数据集中所有单位产品的检验(100%检验)。

严重缺陷highdefect

月球与行星探测数据的极重要质量元素不符合规定,对用户的使用有严重影响。

重缺陷mediumdefect

月球与行星探测数据的重要质量元素不符合规定,或者月球与行星探测数据的质量元素严重不符合

规定,对用户使用有重大影响。

轻缺陷lowdefect

月球与行星探测数据的一般质量元素不符合规定,或者月球与行星探测数据的质量元素轻微不符合

规定,对用户使用有轻微影响。

4数据质量描述原则

概述

月球与行星探测数据可依据使用目的划分成不同规模或类型的数据集,数据集的质量通常采用两

类元素描述:

a)数据质量定性元素:提供概括性的、非定量性的质量信息;

b)数据质量定量元素:提供量化的质量信息,用于评价数据集符合规定的程度。

数据质量定性元素

数据质量定性元素描述见表1。

表1月球与行星探测数据质量定性元素

数据质量定性元素说明

安全性描述数据满足国家相关法律、法规和GB20263对于信息安全的规定

描述数据满足供方或需方特别规定的质量定性指标,如数据范围,可

用户自定义

持续性等

目的描述生产数据集的原因和主要目的

用途描述数据集的使用范围

描述数据集的历史沿革,即数据集从获取、编辑、编译到发布的全过

数据志程的描述。数据志包括两独立的部分:数据源信息和数据处理步骤、

重要处理事件(转换、维护)信息

2

GB/TXXXXX—XXXX

数据质量定量元素

数据质量定量元素描述见表2。

表2数据质量定量元素及子元素

质量元素质量子元素描述

文件命名文件命名的规范性

元数据格式元数据格式的正确性

规范性

数据文件格式数据文件格式的正确性

数据集规范数据集组织规范的正确性

元数据完整性元数据内容的完整性

完整性数据文件完整性数据文件中所包含科学数据的完整性

数据集完整性数据集所包含内容的完整性

元数据内容准确性元数据内容的准确性

数据数值准确性数据文件中所包含的科学测量值的准确性

内容准确性表格类数据内容准确性表格类科学数据所表达内容的正确性

图像类数据内容准确性图像类科学数据所表达内容的正确性

数据集内容准确性数据集所包含各类数据、文件的正确性

时间度量标准时间度量标准的准确性

时间准确度时间一致性时间信息的一致性

时间覆盖性时间覆盖范围的准确性和完整性

空间参考度量标准空间参考度量标准的准确性

空间准确度分辨率分辨率的准确性

空间覆盖性空间覆盖区域的准确性和完整性

5数据质量检验内容与要求

概述

数据质量检验依照元数据、数据文件以及数据集三个层级开展。

元数据检验内容与要求

对描述月球与行星探测数据的元数据进行检验,检查其对标准规范的遵从性,以及包括产品基本信

息、仪器设备参数和工作模式、空间信息和其他描述信息等内容的完整性和准确性,同时给出每项检验

内容的具体要求。

数据文件检验与要求

对月球与行星探测数据实体进行检验,检查其数据格式对元数据所定义数据结构的符合性和可读

性,所存储数据内容的完整性和准确性,并按表格类和图像类两大类数据,对数据内容的准确性进行针

对性检查,同时验证数据实体的时间和空间覆盖性,给出每项检验内容的具体要求。

数据集检验与要求

对按照一定规则组织成集的月球与行星探测数据集进行检验,检验数据集对成集规则的遵从性,数

据集所包含内容的完整性,以及数据集所包含全部数据的时间和空间覆盖性,同时给出每项检验内容的

具体要求。

在完成数据集的上述定量质量检验之后,从安全性、目的、用途、数据志和其他用户自定义的定性

指标出发,开展数据集的定性质量检查。

3

GB/TXXXXX—XXXX

6数据质量检验项目

数据质量定性元素检验项目

数据质量定性元素的检验项见表3。

表3数据质量定性元素检验项

数据质量定性元素检验项描述

a)数据空间位置坐标精度是否符合安全规定;

安全性

b)数据存储或表达的内容是否符合安全规定

a)是否具备数据集生产原因的描述;

目的

b)是否具备数据集预定目标的描述

用途是否具备数据集使用范围的描述

a)是否具备数据源信息的描述;

数据志b)是否具备数据编辑、编译、发布、维护过程中重要情况的描述;

c)是否具备数据质量过程控制的描述

a)是否与数据供方自定义内容一致;

用户自定义

b)是否与数据需方定制要求一致

数据质量定量元素检验项目

数据质量定量元素检验项见表4。

表4数据质量定量元素检验项

质量元素质量子元素检验项检验要求

文件命名格式检查文件命名是否符合命名规范规定的模式

文件命名规范

文件命名正确性检查文件名中各字段取值的合法性

检查定义元数据内容的标签所使用的标准名称及版

元数据标准声明

检查元数据内容是否符合XML(PDS4)或ODL(PDS

可解析性

3)语法规范

元数据格式层级关系检查各元素之间的层级关系构建是否正确

检查表格类数据的结构定义是否与实际数据相符,

逻辑一致性表格数据对象结构定义

各字段定义是否正确

检查图像类数据的结构定义是否与实际数据相符,

图像数据对象结构定义

各字段定义是否正确

数据存储格式检查数据文件是否按照标签所定义的格式进行存储

数据文件格式

文件可读性检查数据文件是否能够按照既定格式正确打读出

数据集命名检查数据集的命名是否符合规范

数据集规范检查数据集所包含的数据文件及其他各类配套文件

数据集组织规范

的目录组织是否符合规范

检查是否正确定义了与产品相关的一些基本信息,

产品基本信息包括与任务、探测器、平台、载荷、产品级别、产品

版本、产品描述等相关信息

检查仪器参数是否符合载荷的实际配置,各仪器参

仪器参数数名称、数据类型、数值单位、数值格式和值域是否

内容完整性元数据完整性

定义完整、正确

检查各载荷的工作模式是否符合载荷的实际配置,

工作模式参数各工作模式参数名称、数据类型、数值单位、数值格

式和值域是否定义完整、正确

空间位置检查坐标系、经度、纬度或高程是否定义完整、正确

4

GB/TXXXXX—XXXX

质量元素质量子元素检验项检验要求

检查坐标系、俯仰角、滚动角、偏航角是否定义完整、

姿态角度

正确

检查与具体载荷相关的其他特性元数据信息的定义

其他元数据信息

是否完整、正确

按照数据存储结构,检查各结构字段中是否存在数

数据存储结构完整性

数据文件完整据内容,数据的记录条数是否完整

性数据值完整性检查每一个数据点是否存在空值、无数据

数据文件大小完整性检查数据文件的大小是否与记录的一致

检查按数据集所定义范围的所有数据文件、以及可

数据文件齐套性能的辅助文件、定标文件、格网文件等配套文件是否

数据集完整性都已经包含在内

检查数据文件标签内容或标签文件中的数据对象描

数据文件一致性

述是否与实际文件一一对应

对于单个数据文件,交叉验证数据文件各字段取值

单文件元数据内容准确

与标签内容对应字段取值是否能正确匹配,各元素

元数据内容准的取值是否符合规定的数值格式和取值范围

确性同一数据集内的全部数据,每个数据文件以及可能

数据集元数据内容准确

的辅助文件、定标文件、格网文件等配套文件的元数

据内容是否一致

数据数值准确数据值是否符合规定的数据类型和取值范围,是否

数值准确性

性存在溢出值/异常值

将表格内的数值曲线化,检查曲线趋势是否与科学

曲线趋势逻辑性

表格类数据内现象存在一致的逻辑性

内容准确性

容准确性检查表格数据是否有异常跳变、平台或非正常偏离

表格内容错误

趋势

灰度均值检查实际图像灰度与期望图像灰度均值是否相当

图像类数据内色调检查图幅色调是否均匀

容准确性清晰度检查图像清晰度是否符合要求

图像内容错误检查图像是否有噪声、漏洞,图像扭曲、失真等

将表格内的数值曲线化,检查数据曲线是否与科学

表格类数据内容

光谱类数据内现象存在一致的逻辑性

容准确性检查各波段图像是否清晰,是否有噪声、图像扭曲和

图像类数据内容

失真等现象。

时间参考系检查时间参考系及其基准是否正确

时间度量标准检查数据及标签中的时间格式是否符合所采用的时

时间格式

间参考系的规定

检查数据的采集的开始时间和结束时间是否正确反

采集时间有效性

映实际的数据获取时间段

时间准确性

时间一致性时间序列完整性检查数据中的记录是否按时间顺序性排列

检查数据中的开始时间和结束时间是否与划定的探

时间关联性

测周期/弧段号具有一致关联性

检查数据采集的时间覆盖密度,是否存在与计划不

时间覆盖性时间覆盖密度

符的漏洞

空间参考度量大地基准检查坐标系统及其使用的参数是否正确

标准高程基准检查高程基准及其使用的参数是否正确

空间分辨率检查图像数据的空间分辨率是否符合要求

空间准确性分辨率

高程分辨率检查高程数据的分辨率是否符合要求

检查数据在空间覆盖上是否存在缺缝或漏洞,是否

空间覆盖性空间覆盖范围

存在多次覆盖

5

GB/TXXXXX—XXXX

7数据质量检验流程

月球与行星探测数据质量检验的流程按如下步骤实施:

a)从待检验的数据集中,抽取数据文件和对该数据文件进行描述的元数据;

b)按照数据文件和元数据的检验项和检验要求,依次对数据文件和元数据进行质量检验,并记录

结果;

c)对成对的数据文件和元数据进行交叉质量检验;

d)依次从数据集中抽取,循环执行步骤a)—c),直至数据集所包含的所有数据文件和元数据

都检验完毕;

e)按照数据集的检验项和检验要求,对数据集进行质量检验,并记录结果;

f)将所有结果进行汇总,并根据结果进行质量等级评价;

g)对不合格的数据集,进行缺陷等级评价。

月球与行星探测数据质量检验的流程图见图1。

图1数据质量检验流程图

8数据质量检验评价

数据质量定性元素评价

月球与行星探测数据质量定性元素评价指标,主要是指数据的安全性和其他数据质量定性元素评价

指标:

a)安全性

月球与行星探测数据的安全性应符合国家相关法律、法规和GB20263的规定.安全性质量元素为合

格,否则为不合格。

b)其他

其他数据质量定性元素评价指标由使用或参考本标准的单位或机构规定。

数据质量定量元素评价

8.2.1检验项分级

数据质量定量元素的评价主要基于检验项的重要等级进行。检验项的重要等级共分三级:

6

GB/TXXXXX—XXXX

a)重要检验项:若检验项不符合要求,将会影响月球与行星探测数据的正确使用;

b)一般检验项:若检验项不符合要求,不会影响月球与行星探测数据的正确使用;

数据质量定量元素的各检验项的重要等级分级见表5。

表5数据质量定量元素各检验项重要等级分级表

质量元素质量子元素检验项关键等级

文件命名格式一般检验项

文件命名规范

文件命名正确性一般检验项

元数据标准声明重要检验项

可解析性重要检验项

元数据格式层级关系重要检验项

逻辑一致性表格数据对象结构定义重要检验项

图像数据对象结构定义重要检验项

数据存储格式重要检验项

数据文件格式

文件可读性重要检验项

数据集命名一般检验项

数据集规范

数据集组织规范一般检验项

产品基本信息重要检验项

仪器参数重要检验项

工作模式参数重要检验项

元数据完整性

空间位置重要检验项

姿态角度重要检验项

内容完整性其他元数据信息一般检验项

数据存储结构完整性重要检验项

数据文件完整性数据值完整性重要检验项

数据文件大小完整性重要检验项

数据文件齐套性重要检验项

数据集完整性

数据文件一致性重要检验项

单文件元数据内容准确性重要检验项

元数据内容准确性

数据集元数据内容准确性重要检验项

数据数值准确性数值准确性重要检验项

表格类数据内容准确曲线趋势逻辑性重要检验项

性表格内容错误重要检验项

内容准确性

色调重要检验项

图像类数据内容准确

清晰度重要检验项

图像内容错误重要检验项

光谱类数据内容准确曲线趋势逻辑性重要检验项

性图像内容错误重要检验项

时间参考系重要检验项

时间度量标准

时间格式重要检验项

采集时间有效性重要检验项

时间准确性

时间一致性时间序列完整性重要检验项

时间关联性重要检验项

时间覆盖性时间覆盖密度重要检验项

大地基准重要检验项

空间参考度量标准

高程基准重要检验项

空间准确性空间分辨率重要检验项

分辨率

高程分辨率重要检验项

空间覆盖性空间覆盖范围重要检验项

7

GB/TXXXXX—XXXX

8.2.2评价等级

对月球与行星探测数据集的质量评价在元数据、数据实体和数据集三个层级上开展,最终得出对月

球与行星探测数据集的总体评价,并在表6中记录评价结果。质量评价的结果分为优秀、合格和不合格

三个等级,划分如下:

a)所有检查项都符合要求,则质量等级为优秀;

b)仅存在一般检查项的不符合,则质量等级为合格;

c)存在重要检查项的不符合,则质量等级为不合格。

表6数据质量定量元素评价结果记录表

评价对象

权重

元数据数据实体数据集

逻辑一致性质量等级

内容完整性质量等级

内容准确度质量等级—

时间准确度质量等级—

空间准确度质量等级—

总体质量等级

8.2.3缺陷等级

质量评价等级为不合格的月球与行星探测数据集,分别针对元数据、数据实体和数据集的未通过检

验项,评价其对月球与行星探测数据的影像,进行缺陷等级的评定,并在表7中记录评定结果。缺陷等

级按照数据对用户使用的影响程度分为严重缺陷、重缺陷和轻缺陷三个等级:

a)严重缺陷:未通过的重要检验项,会对用户正确使用科学数据产生重大影响;

b)重缺陷:未通过的重要检验项,会对用户正确使用科学数据产生一定的影响;

c)轻缺陷:未通过的重要检验项,不影响用户对科学数据的正确使用,仅在非科学数据的内容上

存在轻微缺陷。

表7元数据评价的缺陷等级

评价对象

权重

元数据数据实体数据集

逻辑一致性质量等级

内容完整性质量等级

内容准确度质量等级—

时间准确度质量等级—

空间准确度质量等级—

总体质量等级

9数据质量检验报告

数据质量评价报告是数据质量检查与评价过程、方法及结果的综合描述和评述,是对月球与行星探

测数据质量特性的综合评价。数据质量评价报告由正文和数据质量评价附表组成。正文应是质量评价方

法、过程和结果的全面记录和描述,包括质量检査与评价的组织、数据集概况、检査方法、评价依据、

评价规则、质量评述、存在问题及结论等。

8

GB/TXXXXX—XXXX

目次

1范围...............................................................................1

2规范性引用文件.....................................................................1

3术语和定义.........................................................................1

4数据质量描述原则...................................................................2

概述...........................................................................2

数据质量定性元素...............................................................2

数据质量定量元素...............................................................3

5数据质量检验内容与要求.............................................................3

概述...........................................................................3

元数据检验内容与要求...........................................................3

数据文件检验与要求.............................................................3

数据集检验与要求...............................................................3

6数据质量检验项目...................................................................4

数据质量定性元素检验项目.......................................................4

数据质量定量元素检验项目.......................................................4

7数据质量检验流程...................................................................6

8数据质量检验评价...................................................................6

数据质量定性元素评价...........................................................6

数据质量定量元素评价...........................................................6

9数据质量检验报告...................................................................8

I

GB/TXXXXX—XXXX

月球与行星探测数据质量检验要求

1范围

本文件规定了月球与行星探测数据质量检验原则、检验内容、检验要求和检验流程。

本文件适用于月球与行星探测数据的质量检查和质量评定。

2规范性引用文件

下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中,注日期的引用文件,

仅该日期对应的版本适用于本文件;不注日期的引用文件,其最新版本(包括所有的修改单)适用于本

文件。

GB/T33996-2017月球探测数据产品分级与命名

GB/T33997-2017月球与行星数据产品格式规范

GB/T33998-2017月球信息元数据

3术语和定义

下列术语和定义适用于本文件。

数据集dataset

可以识别的数据集合。

注:通过诸如空间范围或要素类型的限制,数据集在物理上可以是更大数据集较小的部分。从理论上讲,数据集可

以小到更大数据集内的单个要素或要素属性。一张硬拷贝地图或图表均可以被认为是一个数据集。

[GB/T19710-2005,定义4.2]

数据质量元素dataqualityelement

产品满足用户要求和使用目的的基本特征。

数据质量评价指标dataqualitymeasure

定义数据质量元素的评价等级参数。

单位产品item

可以单独描述和考察的对象。

注:单位产品可以是数据集的任何部分,如要素、要素间关系、要素属性或它们的组合。

[GB/T2828.1-2003,定义3.1.4]

样本metadataentity

一组说明数据相同特征的元数据元素。

注:可以是单个实体,也可以是包含一个或多个实体的聚合实体。

1

GB/TXXXXX—XXXX

[GB/T19710-2005,定义4.7]

样本sample

在抽样检验中,取自一个批并且提供有关该批的信息的一个或一组单位产品。

抽样检验samplinginspection

按照一定的抽样方法,从数据集中抽取样本数据进行的检验。

全数检验fullinspection

对数据集中所有单位产品的检验(100%检验)。

严重缺陷highdefect

月球与行星探测数据的极重要质量元素不符合规定,对用户的使用有严重影响。

重缺陷mediumdefect

月球与行星探测数据的重要质量元素不符合规定,或者月球与行星探测数据的质量元素严重不符合

规定,对用户使用有重大影响。

轻缺陷lowdefect

月球与行星探测数据的一般质量元素不符合规定,或者月球与行星探测数据的质量元素轻微不符合

规定,对用户使用有轻微影响。

4数据质量描述原则

概述

月球与行星探测数据可依据使用目的划分成不同规模或类型的数据集,数据集的质量通常采用两

类元素描述:

a)数据质量定性元素:提供概括性的、非定量性的质量信息;

b)数据质量定量元素:提供量化的质量信息,用于评价数据集符合规定的程度。

数据质量定性元素

数据质量定性元素描述见表1。

表1月球与行星探测数据质量定性元素

数据质量定性元素说明

安全性描述数据满足国家相关法律、法规和GB20263对于信息安全的规定

描述数据满足供方或需方特别规定的质量定性指标,如数据范围,可

用户自定义

持续性等

目的描述生产数据集的原因和主要目的

用途描述数据集的使用范围

描述数据集的历史沿革,即数据集从获取、编辑、编译到发布的全过

数据志程的描述。数据志包括两独立的部分:数据源信息和数据处理步骤、

重要处理事件(转换、维护)信息

2

GB/TXXXXX—XXXX

数据质量定量元素

数据质量定量元素描述见表2。

表2数据质量定量元素及子元素

质量元素质量子元素描述

文件命名文件命名的规范性

元数据格式元数据格式的正确性

规范性

数据文件格式数据文件格式的正确性

数据集规范数据集组织规范的正确性

元数据完整性元数据内容的完整性

完整性数据文件完整性数据文件中所包含科学数据的完整性

数据集完整性数据集所包含内容的完整性

元数据内容准确性元数据内容的准确性

数据数值准确性数据文件中所包含的科学测量值的准确性

内容准确性表格类数据内容准确性

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论