主数据管理理论与实践

主数据管理理论与实践

导读

本文介绍了主数据的概述，包括主数据的定义、特征、类型、和其他数据的关系，

主数据管理的意义，主数据管理的实施痛点，主数据管理的内容，主数据的管理

实施方法以及项目实施示例等内容，为对主数据和数据管理有研究兴趣的朋友提

供了一定的参考。

一、主数据管理概述

1.1.主数据的定义在数据管理领域，对于主数据的概念和定义有不同

的解释和说明。参照标准和规范定义，本文采用国际数据管理协会DAMA

在《DAMA数据管理知识体系指南》一书中对主数据的定义进行说明。主

数据是关于业务实体的数据，这些实体为业务交易提供关联环境。业务

规则通常规定了主数据格式和允许的取值范围，一般组织的主数据包括

当事人、产品、财务结构和位置等。主数据是关于关键业务实体权威的、

最准确的数据，可用于建立交易数据的关联环境。主数据值被认为是

“黄金”数据，主数据相对交易数据而言，属性相对稳定，准确度要求

更高，唯一识别。1.2.主数据的特征相比于其他数据，主数据具有如

下特征：1）超越部门，主数据是所有部门和所有业务过程的最大公约

数据；2）超越流程，主数据不随具体流程而改变，而是作为完整流程

的不变因素。3）超越主题，不依赖特定业务主题却又服务于所有业务

主题的有关业务实体信息；4）超越系统，主数据管理作为单独的系统

存在，服务于但高于其他业务系统；5）超越技术，主数据必须应用一

种能够为各类异构系统所兼容的技术条件，面向微服务架构为主数据的

实施提供了有效的工具。1.3.主数据的类型主数据主要包括配置型主

数据和核心主数据。1）配置型主数据：配置型主数据，也称为参考数

据，是描述业务或核心主数据属性分类的参考信息，会在整个组织内共

享使用。一般依据国际标准、国家标准、行业标准或企业标准和相关规

范等，在系统中一次性配置使用的基础数据，例如国家、民族、性别等

规范性表述。配置型主数据相对稳定，不易变化。2）核心主数据：核

心主数据指用来描述企业核心业务实体的主数据，是企业核心业务对象、

交易业务的执行主体，如产品、物资、设备、组织机构、员工、供应商、

客户、会计科目等。1.4.主数据与其他数据的关系在《DAMA数据管理

知识体系指南》一书中，将数据管理领域知识体系概括为十个大的方面，

分别是数据架构管理、数据开发、数据操作管理、数据安全管理、参考

数据和主数据管理、数据仓库和商务智能管理、文档和内容管理、元数

据管理、数据质量管理和数据治理等。主数据管理与参考数据管理作为

最核心的业务内容，在数据管理体系，以及提高数据质量，构建企业数

据资产的过程中发挥着巨大的作用。DAMA-DMBOK2.0数据管理知识体系

指南。

价赞键分析

相老的敷布蹩梅

y例限a管・\依最开发

取

«枸

P.同

幔

»合

数鬃用・喝

»制(<

•依修保■

«付敷出■件管电

兀*裾清

w・B弟旬«1色»

・及被如梦出

•方H%鞅务

•解。

文n川内春।

•倒I傲露衣仝曾1«

•我©w0・

・各忻和区理.・"£!

•内春管过yx,冷见

・喧雷/6考号X•»«

•快出/a弱rr■管*）：*«#«、・・、・

0淌M支柒*户数榭

过控加・援产区费需

施，*4

主数据及主数据管理往往和其他已有的概念混在一起，从而影响人们对

主数据与主数据管理的本质的认识。本文将主数据与元数据、主数据与

交易数据、主数据与参考数据这三个概念进行区别和联系。

1）主数据与元数据主数据和元数据是两个完全不同的概念。元数据是

指公司数据资产管理的基础，是关于“数据的数据”，例如数据类型、

数据定义、数据关系等，相当于数据表格中的表头信息，是一个相对客

观的概念。而主数据是从元数据中挑选出来的，表征公司业务运行的关

键、通用型数据，是一个相对主观的概念。它不仅仅只是表头信息，而

是包括实例数据。例如公司的产品列表、客户列表、分公司地址信息等。

数据湖元数据治理实践（PPT）2）主数据与交易数据交易数据也是基于

元数据衍生而来的，反应公司实时业务记录的数据，同样是实例数据。

主数据是相对稳定的，静止不变或者是一段时间内静止不变的数据，而

交易数据则是实时变化的数据，往往描述的是某一个时间点所发生的交

易行为。例如客户订单、存货跟踪、销售记录、售后事件等。一个主数

据可能会跟多个交易数据有关联，而一个交易数据可能又会对主数据产

生影响。举例来说，航空公司中，“客户本年度飞行里程”是一个主数

据，而“客户每次飞行记录”，则是交易数据，当交易数据“客户每次

飞行记录”累积到一年时，主数据“客户本年度飞行里程”便会产生更

新。3）主数据与参考数据参考数据是用于将其他数据进行分类或者目

录整编的数据。业务规则通常规定参考数据值是几个允许值之一。允许

值的数据集是一个值域。有些组织根据内部业务定义参考数据的值域，

其他参考数据的值域可由像政府或行业标准等外部资源来定义。多组参

考数据的值域可以指向同一个概念域。每个值在其所在的值域集是唯一

的。用通俗的术语表述，参考数据也可以叫做数据字典、代码集等。企

业为了进行更有效率的数据整合、数据共享和数据分析应用，开始尝试

对参考数据进行企业或者部门层面的整合和管理，利用参考数据集记录

系统尝试为范围内的IT系统中的数据库提供统一的参考数据。参考数

据是对数据的解释针对一些数据范围和取值的数据解释，让人们容易读

取相关的数据。在政务数据应用领域，广义的参考数据体现在参考数据

集记录系统、政务信息资源目录系统、代码集系统、数据图书馆等系统

方面，广义的主数据体现在数据融合建仓的过程中，一般政务数据项目

会建设包括人口、法人、房屋、电子证照、社会信用、空间地理等主数

据，也称基础库。在实操中，参考数据管理和标准实施一般是和主数据

管理项目一起实施。

二、主数据管理的意义

主数据是数据之源，是数据资产管理的核心，是信息系统互联互通的基

石，是信息化和数字化的重要基础。通过构建准确、唯一、权威的数据

来源建立企业主数据标准管理体系，是提高企事业单位数据质量和数据

资产价值的关键因素。良好的主数据管理对于企业数据资产体系建设，

通过数据驱动发展，构建未来发展与竞争的核心竞争力，具有重要意义。

1)消除数据冗余，提升数据质量：主数据打通各业务链条，统一

数据语言，统一数据标准，实现数据共享，最大化消除了数据冗余，提

升数据质量。2)提升数据处理效率：通过主数据管理可以实现数

据动态自动整理、复制，减少人工整理数据的时间和工作量。3)数

据驱动，提高公司战略协同能力：数据作为公司内部经营分析、决策支

撑的“通行语音”，实现多个部门统一后，有助于打通部门、系统壁垒，

实现信息集成与共享，提高公司整体的战略协同力。4)完善IT系

统架构和企业数据架构，助力数据应用和管理：通过主数据建设，将为

企业在数据应用与管理奠定基础。从IT建设的角度，主数据管理可以

增强IT结构的灵活性，构建覆盖整个企业范围内的数据资产管理基础

和相应规范，并且更灵活地适应企业业务需求的变化。此外，主数据质

量的提高也能够为后期数据集成和数据整合打下良好的基础。

三、主数据管理的实施痛点

主数据管理意义非凡，但是在实践和实施方面还是存在很多的难点，突

出表现在以下几个方面：1）认知不统一，不重视主数据的总体规划，

缺乏顶层设计，无法在单位决策层、管理层和业务层等各层级统一思路；

2）各职能部门各自为政，难以在标准和规则层面达成一致，致使主数

据代码标准难统一；3）通用标准主数据（国际标准、国家标准和行业

标准产生的主数据）管理分散，缺乏便捷可靠的数据获取渠道，数据获

取困难；4）单位内部已经存在且分散管理的主数据，由于缺乏统一标

准和数据关联，大量的数据清洗依靠人为判断，数据清洗难度和风险都

很大；5）企业历史系统和历史数据的数据标准化程度不高，数据清洗

难，改造成本高，给主数据系统集成造成较大困难；主数据管理进程需

要修改现有的相关生产业务过程和系统，需要从管理学的角度充分调动

业务部门密切配合，对组织的业务运营效率和信息决策周期要求较高。

6）主数据管理模式要求业务间有表单数据交换，因此短期内会使得信

息架构发生变化，甚至变得更加复杂。

四、主数据管理的内容

主数据管理的主要内容包括“两体系、一工具”，即主数据管理标准体

系、主数据管理保障体系和主数据管理工具。其中，主数据管理标准体

系是主数据管理工作的重中之重，主数据管理保障体系为主数据管理保

驾护航，主数据管理工具确保主数据管理有效落地。

4.1.主数据管理标准体系

主数据标准管理体系包含业务标准（编码规则、分类规则、描述规则等）、

主数据模型标准。主数据标准管理体系在建设梳理的过程中，一般会衍

生出一套代码体系表或称主数据资产目录。1）主数据业务标准是对主

数据业务含义的统一解释及要求，包括主数据来源、主数据的管理级次、

统一管理的基础数据项、数据项在相关业务环境中产生过程的描述及含

义解释、数据之间的制约关系、数据产生过程中所要遵循的业务规则。

主数据业务规则包含主数据各数据项的编码规范、分类规则、描述规则

等。2）主数据模型标准包含：主数据逻辑模型和主数据物理模型。主

数据逻辑模型主要是通过实体关系图俩表示，ER图，主数据物理模型，

也成为主数据的物理存储结构表。3）主数据代码体系表：在某些领域

内，又称主数据资产目录。是描述企事业单位信息化建设过程中所使用

的主数据代码种类、各类主数据代码名称、代码属性（分类、明细、规

则等）、采（参）标号及代码建设情况的汇总表，是企业主数据代码查

询和应用的依据，同时也是主数据代码的全局性和指导性文件。主数据

代码体系表主要结合了企业的经营管理特点，服务于企业信息化建设，

主要包括两部分内容，第一是企业信息代码体系表的框架结构以及分类,

第二是所有分类下的信息代码标准明细以及建设情况。如政府数据应用

领域的政务信息资源目录体系。

4.2.主数据管理保障体系

主数据管理保障体系包括主数据管理组织、制度、流程、应用及管理评

价五部分。1）主数据管理组织主数据管理组织主要包括企业内各类主

数据的管理组织架构、运营模式、角色与职责规划，通过组织体系规划

建立明确的主数据管理机构和组织体系，落实各级部门的职责和可持续

的主数据管理组织与人员。主数据管理组织结构包括决策层、管理层和

执行层。2）主数据管理制度主数据管理制度规定了主数据管理工作的

内容、程序、章程及方法，是主数据管理人员的行为规范和准则，主要

包含各种管理办法、规范、细则、手册等。主要包括《主数据管理办法》、

《主数据标准规范》、《主数据提案指南》、《主数据维护细则》、《主

数据管理工具操作手册》等。3）主数据管理流程提供梳理数据维护和

管理流程，建立符合企业实际应用的管理流程，保证主数据标准饿到有

效执行，实现主数据的持续长效治理…主数据管理流程可以以管理制度

的方式存在，也可以直接嵌入到主数据管理工具中。主数据管理流程包

括主数据业务管理流程（主数据的申请、校验、审核、发布、变更、冻

结、归档等进行全生命周期管理）、主数据标准管理流程（对主数据标

准的分析、制定、审核、发布、应用与反馈等流程）、主数据质量管理

流程（主数据的创建、变更、冻结、归档）等。4）主数据应用主数据

应用主要包含三部分内容：明确管理要求、实施有效的管理、强化保障

服务。5）主数据管理评价主数据管理评价是用来评估及考核主数据相

关责任人职责的履行情况及数据管理标准和数据政策的执行情况，通过

建立定性或定量的主数据管理评价考核指标，加强企业对主数据管理相

关责任、标准与政策执行的掌控能力。主数据管理评价指标从管理标准、

数据认责和数据政策三个角度考虑，由数据所有人与数据认责人共同确

定，定义一系列的衡量指标和规则，一方面落实和检查主数据的应用情

况，另一方面考察和评估主数据管理、主数据标准、主数据质量的执行

情况。

我I主数据管理评价考核指标

序号考核方向技术指标衡量标准

1及时性及时率满足时间要求的数据总数/总数据数

数据真实睾1-数据中失真记录总数/数据总记录数

真实性和准有效值比率1-超出值域的异常值记录总数/总记录数

2

确性流转过程失真率数据传输失真记录总数/总记录数

重复数据比率重复记录数/总记录数

外键无对应主键的

外键无对应主键的记录总数/总记录数

3一致性记录比率

主数据一致率一致的主数据总数/主数据总数

字段的空值率空值记录总数/总记录数

4完整性

信息完备率祉够获取的指标数/总“二:解球澳曷弟拉

4.3.主数据管理工具

主数据管理工具是主数据标准文本发布、主数据全生命周期管理的重要

平台。主数据标准的维护流程和管理措施通过管理平台进行系统实现和

控制，以保证标准的唯一性和宣贯的及时性。

护

数据维

合

数据整

模

数数据建

象定义

•对数据汇集申

据管理

据•数

码规则

,编数据监管修

据封存

管•数

性定义

•属清理合并查

理

典表管

・字

程定义

理•流订

标

准

务

访问服

规范

编码

权限

访问

审批

编码

历史

编码

（ESB）

总线

服务

企业

系统

人力

系统

统

0A系

系统

PDM

语言

其他

java

java

.net

务基

数据服

理、

据管

、数

整合

数据

模、

据建

括数

要包

具主

理工

据管

主数

块。

能模

等功

管理

标准

理、

础管

主数据管理系统（MDM）

主数据建模主数据整合主数据管理

对

流

数

数

数

数

数

数

字

塌

维

日

属

据

典

象

据

据

据

程

据

据

护

常

码

性

创

管

定

汇

清

完

管

詈

定

合

审

炮

定

建

理

义

集

洗