德阳银行-数据质量管理办法_v1 2

1、数据标准化项目三期数据质量管理体系规划德阳银行数据质量管理办法讨论稿第一章总则第一条 为了规范德阳银行股份（以下简称德阳银行）数据质量管理工作，利于问题的发现和分析，持续优化德阳银行数据质量，有力支持全行业务运行、管理分析和领导决策、提升银行数据资产的业务价值，特制定本办法。第二条 本办法所称数据质量是指数据满足业务运行、管理与决策的程度。数据质量从以下的八个方面进行度量：（一)唯一性：数据在特定数据集中不存在重复值。（二)准确性：数据正确的体现真实情况。（三)关联性：数据项取值满足与其他数据项之间的依赖关系。（四)一致性：同一信息项数据在系统内或不同系统间保持一致。（五)完整性：所必须的数据

2、项及数据项的必须属性均被记录。（六)有效性：数据符合已定义的格式规范和业务规则。（七)及时性：数据被及时更新以体现当前事实。（八)可获取性：数据易于访问、数据格式和展现满足用户需要。第三条 德阳银行数据质量管理范围包括数据质量问题发现、数据质量问题分析、数据质量提升、数据质量度量规则管理以及数据质量管理工具的建设与维护等相关工作。第四条 本办法适用于德阳银行数据质量管理的相关工作。数据标准化项目三期数据质量管理体系规划第二章数据质量管理的组织与职责第五条 德阳银行数据质量管理组织包括信息科技管理委员会、数据质量管理工作小组、总行相关业务运营部门、总行科技部、各分支行。第六条 信息科技管理委员会

3、是数据质量管理的最终决策机构，数据质量管理方面的具体职责包括：（一) 审批数据质量管理相关办法、流程和规范；（二) 审批数据质量管理相关项目；（三) 对数据质量管理工作的重大事项进行协调与决策；（四) 定期听取数据质量管理工作小组对数据质量管理工作的汇报。第七条 数据质量管理工作小组根据外部监管单位的要求和德阳银行发展的要求，负责数据质量管理工作的整体组织、协调与执行，数据质量管理工作小组领导（以下简称小组领导）包括组长、副组长和总行业务部门数据质量管理员，其中组长由德阳银行数据质量负责人担任，副组长由对外监管报送数据质量负责人担任。执行成员包括业务分析员、数据质量分析/评估员、系统分析员，其

4、务分析员的工作可包含在业务部门数据管理综合岗职责中。数据质量管理小组的具体职责包括：（一) 负责组织、推动和协调数据质量管理工作；（二) 根据外部监管要求和德阳银行发展的需求，制定和更新数据质量管理办法、流程和规范；（三) 制定和更新数据质量度量规则及检核方法模板（附件 1）；（四) 检核、汇总及组织分析数据质量问题，分类、汇总数据质量提升需求，编写数据质量提升需求报告；数据标准化项目三期数据质量管理体系规划（五) 依据数据质量提升需求报告，提出各类数据质量提升工作的分工建议；（六) 对数据质量提升工作方案提出会签建议；（七) 协助相关部门完成外部监管下达的数据质量管理相关任务，对外部监管明确

5、要求的数据质量进行严格的监督管理；（八) 评估和检查数据质量提升的工作结果，编写数据质量提升工作总结报告；（九) 提出数据质量管理工具建设需求；（十) 提出数据质量考核方案的建议；（十一)定期向信息科技管理委员会汇报数据质量管理工作开展情况，及时向信息科技管理委员会汇报有关数据质量管理工作的重大事项。第八条 总行相关业务部门负责从业务层面参与数据质量管理工作，具体职责包括：（一) 制定数据质量度量业务相关的规则；（二) 分析数据质量问题产生的根源，从业务的角度提出数据质量问题的解决方案，并负责配合解决数据质量问题；（三) 提出数据质量提升需求；（四) 牵头或配合数据质量提升等工作；（五) 按照

6、业务流程进行日常数据录入和维护，并确保数据质量；（六) 各部门对应于各个基础类数据主题质量管理的职责通过数据质量管理 RACI 模型来定义，该模型参见本文附件 5。数据标准化项目三期数据质量管理体系规划第九条 各分支行负责按照业务流程进行日常数据录入和维护工作，及时发现并提交数据质量问题，参与数据质量问题分析以及数据质量提升相关工作。第十条 科技部负责从技术层面参与数据质量管理工作，具体职责包括：（一) 参与数据质量分析工作；（二) 参与制定数据质量提升方案；（三) 数据质量管理相关技术环境的搭建和维护；（四) 对历史数据提升和 IT 系统改造提供技术支持。第三章数据质量问题发现第十一条 数据

7、质量问题的发现分为以下两种方式：（一) 总行相关部门及各分支行在日常业务操作中发现数据质量问题;（二) 数据质量管理部门组织总行相关部门根据现有数据质量度量规则进行数据质量检核，发现数据质量问题。第十二条 总行相关部门及各分支行在日常业务操作过程中发现的数据质量问题，须及时提交到数据质量管理工作小组。第十三条 数据质量管理工作小组组织总行相关部门及各分支行进行数据质量检核工作：（一) 数据质量管理工作小组根据数据质量检核方法，制定数据质量检核方案；数据标准化项目三期数据质量管理体系规划（二) 总行相关部门及各分支行开展数据质量的人工检核工作，并及时向数据质量管理工作小组提交检核结果；（三) 数

8、据质量管理工作小组使用数据质量管理工具进行检核工作。第十四条 数据质量管理工作小组汇总日常业务操作过程中发现的数据质量问题和数据质量检核结果，编写数据质量问题报告（附件 2）。第四章数据质量问题分析第十五条 数据质量管理工作小组组织相关部门、相关 IT 项目组及相关分支行，根据数据质量问题报告开展数据质量问题分析工作：（一) 总行相关部门及分支行从业务优化层面对数据质量问题的原因进行分析，包括但不限于业务流程、业务操作规范性、管理制度，以及 IT 系统需求等；（二) 相关 IT 项目组从技术层面对数据质量进行分析，包括但不限于数据标准、数据模型、IT 系统功能等。第十六条 总行相关部门应根据数

9、据质量问题分析结果提交相应的数据质量度量规则，度量规则的管理参照本办法第六章规定执行。第十七条 总行相关部门及分支行根据数据质量问题分析结果向数据质量管理工作小组提交数据质量提升需求。第十八条 数据质量管理部门整合分析结果和数据质量提升需求，按照历史数据质量提升、业务优化、IT 系统改造对需求进行分类和汇总，编写数据质量提升需求报告。第十九条 数据质量管理工作小组依据数据质量提升需求报告，提数据标准化项目三期数据质量管理体系规划出各类数据质量提升工作的牵头部门和配合部门建议，报小组领导审批。第五章数据质量提升第二十条 历史数据质量提升工作：（一) 历史数据质量提升工作的牵头部门组织相关配合部门

10、，研究制定历史数据质量提升方案，方案应会签数据质量管理工作小组及数据质量提升需求部门。（二) 相关 IT 项目组对历史数据质量提升工作提供技术支持；（三) 工作方案确定后，由牵头部门组织实施。第二十一条数据质量提升的业务优化工作：（一) 业务优化工作的牵头部门组织相关配合部门，研究制定业务流程优化与管理制度建设完善工作方案，方案应会签数据质量管理部门及数据质量提升需求提出部门；（二) 工作方案确定后，由牵头部门组织实施。第二十二条数据质量提升的 IT 系统改造工作：（一) IT 系统改造的牵头部门组织相关配合部门，研究制定 IT 系统改造工作方案，方案应会签数据质量管理部门及数据质量提升需求提

11、出部门；（二) 数据质量提升的 IT 系统改造工作任务应合并到相关 IT 系统改造项目中实施，如果无法合并，牵头部门根据开发银行 IT 项目立项的相关规定单独立项，并组织实施。第二十三条 数据质量管理工作小组根据数据质量提升工作实施结数据标准化项目三期数据质量管理体系规划果完善数据质量度量规则。第二十四条 数据质量管理工作小组对各类数据提升工作执行情况进行评估和检查，编写数据质量提升工作总结报告，并报信息科技管理委员会审阅。第六章数据质量度量规则管理第二十五条 数据质量度量规则是数据质量的衡量标准，其制定的依据包括：（一) 已发布的数据标准；（二) 业务运行、管理与决策的相关需求；（三) 外部

12、监管及政策法规的要求。第二十六条 数据质量度量规则分为基础类数据质量度量规则和分析类数据质量度量规则：（一) 基础类数据质量度量规则用于衡量客户、产品、交易、协议、渠道、地址、资产、财务、营销、组织等主题数据的质量，基础类数据主要产生于业务生产类 IT 系统；（二) 分析类数据质量度量规则用于衡量分析类数据的质量，分析类数据是指按照一定规则对基础类数据加工而生产的衍生数据。第二十七条 检核方法是指依照度量规则制定、用于检查和分析数据质量的技术方法，包括管理工具检核和人工检核两种方法。第二十八条 总行相关部门提出数据质量度量规则，由数据质量管理工作小组汇总、分析度量规则，对于有冲突或歧义的数据质

13、量度量规数据标准化项目三期数据质量管理体系规划则，由数据质量管理工作小组牵头，协调总行相关部门研究解决。第二十九条 数据质量管理工作小组根据确认后的数据质量度量规则制定数据质量检核方法，相关 IT 项目组提供技术支持。第三十条 总行相关部门数据质量管理综合岗汇总本部门数据质量规则变更情况，并数据质量管理工作小组。第三十一条 如果 IT 系统数据模型发生变更，系统管理部门或 IT系统项目组应将评审通过或备案后的数据模型设计文档抄送数据质量管理部门，数据质量管理部门协调总行相关部门修订数据质量度量规则，并在数据质量管理工具中及时更新数据质量度量规则和检核方法。第七章数据质量管理工具第三十二条 数据

14、质量管理小组是数据质量管理工具的主管机构，相关 IT 项目组负责管理工具的建设与维护。第三十三条 数据质量管理小组使用数据质量管理工具，开展以下工作：（一) 管理和维护数据质量度量规则及检核方法；（二) 收集数据质量问题；（三) 进行数据质量检核及问题跟踪处理；（四) 定期发布各类数据质量管理工作报告。第三十四条 总行相关部门各分支行使用数据质量管理工具，开展以下工作：（一) 向数据质量管理工作小组反馈数据质量问题；数据标准化项目三期数据质量管理体系规划（二) 进行数据质量问题自查；（三) 查阅数据质量度量规则；（四) 查阅各类数据质量管理工作报告。第八章数据质量考核第三十五条 数据质量管理小

15、组根据全行数据质量问题报告及数据质量提升情况，提出数据质量考核方案的建议。第三十六条 数据质量管理小组组织开展数据质量考核工作，并向信息管理委员会汇报考核结果。第九章附则第三十七条 因违反本办法产生的不良后果造成损失，视情节按照德阳银行员工违规行为处理有关规定追究相关人员责任。第三十八条 如果数据质量管理工作中出现争议或者分歧，由数据质量管理小组协调解决。对无法解决的重大争议和分歧，由数据质量管理小组报信息科技管理委员会决策。第三十九条 数据质量管理的要求应该参照外部监管单位下达的任务和要求。在设定具体数据质量管理目标时，不应低于外部监管单位下达的要求。第四十条 数据质量管理流程参见附件 3；

16、数据质量规则管理流程参见附件 4.数据标准化项目三期数据质量管理体系规划第四十一条 本办法由总行科技部负责制定、修订和解释。第四十二条 本办法自 xxxx 年x 月 x 日期实施。数据标准化项目三期数据质量管理体系规划附件：1. 德阳银行数据质量度量规则及检核方法模板2. 德阳银行数据质量问题报告模板2.数据质量管理流程3.数据质量度量规则管理流程4.数据质量管理 RACI 模型数据标准化项目三期数据质量管理体系规划附件 1 德阳银行数据质量度量规则及检核方法模板德阳银行数据质量度量规则及检核方法系统名称或数据主题名称度量规则填写部门名称时间文档说明本文档由总行相关部门与科技部共同编写，总行相

17、关部门编写数据质量度量规则，科技部依据数据质量度量规则，定义数据质量检核方法。对数据质量度量规则的发布和更新，须参照德阳银行数据质量管理办法进行。数据质量管理系统将依据本文档进行数据质量监控设置。在数据质量管理项目中须参照数据质量检核方法进行数据质量问题检查。文档信息文档修订历史修订日期修订人审批人说明文档版本度量规则填写部门起草人文档版本号审批人文档日期数据标准化项目三期数据质量管理体系规划1.简介1.1.目的【描述编写本文档的目的，指出预期的读者】1.2.范围【简要说明任务提出者，功能范围】1.3.术语【本文档使用的专业词汇并对其进行简要解释】 基础类数据质量度量规则用于衡量客户、产品、协

18、议、渠道、地址、交易、资产、财务、营销、组织等主题数据的质量，基础类数据主要产生于生产类 IT 系统； 分析类数据质量度量规则用于衡量分析类数据的质量，分析类数据是按照一定规则对基础类数据加工而生产的衍生数据。2.数据范围描述【介绍本文档定义的数据质量度量规则属于哪个系统或数据主题】3.主要业务价值【介绍本文档设计的数据在业务流程中的作用以及业务价值】4.数据质量需求【分类介绍相关数据质量的需求】4.1.业务流程相关数据质量需求数据标准化项目三期数据质量管理体系规划【列出业务流程对数据质量的需求】4.2.统计分析相关数据质量需求【列出统计分析等数据应用对数据质量的需求】4.3.法规遵从相关数据

19、质量需求【列出各类法规遵从对数据质量的需求】5.数据度量规则5.1.基础类数据质量度量规则【数据质量度量规则名称】度量规则 【由度量规则制定部门填写】规则 ID【规则 ID】业务系统/数据主题【该数据所在的系统或者数据主题】信息项【该数据的数据项名称】数据质量需求【引用数据质量需求，对于基础类数据的度量规则，数据质量需求通常来自数据标准。】数据质量分类【唯一性、准确性、关联性、一致性、完整性、有效性、及时性、可获取性】数据质量描述【描述该数据的特性，例如：数据格式要求、长度要求，非空、唯一性要求等。】影响描述【描述如果出现数据质量问题，会有什么影响，会影响哪些数据或者功能】监控周期要求【描述对

20、该数据的监控周期：日、月、周、年等】检核方法 【由科技部填写】检核方式【自动检核、手动检核】数据库连接信息【检核的数据库、连接用户、表、字段信息】检核方法描述【从技术角度描述如何检核数据质量问题，例如SQL 语句、脚本等；如果是手工检核，需要描述人工判断方法。】数据标准化项目三期数据质量管理体系规划5.2.分析类数据质量度量规则【数据质量度量规则名称】6.相关上下游数据说明【描述本文涉及的数据在全行数据流图中的位置，并介绍有哪些相关的上下游数据。】度量规则 【由度量规则制定部门填写】规则 ID【规则 ID】业务系统/数据主题【该数据所在的系统或者数据主题】信息项【该数据的数据项名称】数据质量需

21、求【引用数据质量需求】数据质量定义【介绍该指标的含义，以及如何计算】数据质量分类【指标超阈值、相关指标不一致等】数据质量描述【描述该数据的特性，例如：合理的取值范围、与其他指标的一致性要求等。】影响描述【描述如果出现数据质量问题，会有什么影响，会影响哪些统计分析】监控周期要求【描述对该数据的监控周期：日、月、周、年等】检核方法 【由科技部填写】检核方式【自动检核、手动检核】数据库连接信息【检核的数据库、连接用户、表、字段信息】检核方法描述【从技术角度描述如何检核数据质量问题，例如SQL 语句、脚本等；如果是手工检核，需要描述人工判断方法。】数据标准化项目三期数据质量管理体系规划附件 2 德阳银

22、行数据质量问题报告模板德阳银行数据质量问题报告数据质量问题名称数据质量报告部门名称时间文档说明本文档由总行相关部门与科技部共同编写，定义数据质量问题报告方法，分别用于相关部门向数据质量管理工作小组汇报日常业务操作过程中发现的数据质量问题和数据质量检核结果，以及数据质量管理工作小组对各部门上报的数据质量管理问题进行汇总。对数据质量问题报告的发布和更新，须参照德阳银行数据质量管理办法进行。文档信息文档修订历史修订日期修订人审批人说明文档版本数据质量问题报告部门起草人文档版本号审批人文档日期数据标准化项目三期数据质量管理体系规划2.数据质量问题发现部门报告【数据质量问题报告名称】3.数据质量问题汇总

23、模板文档名称文档数据质量问题汇总模板数据质量问题汇总模板.xlsx数据质量问题【由数据质量问题发现部门填写】问题名称【数据质量问题名称】问题报告部门【发现、提出该数据质量问题的部门】数据主题【该数据质量问题相关的数据主题】业务系统【发生该数据质量问题的系统】信息项【该数据质量问题相关的数据项名称】问题描述【详细描述数据质量问题】问题发现过程【描述发现数据质量的方法和过程，便于后期分析人员再现数据质量问题】影响描述【描述出现该数据质量问题，会有什么影响， 会影响哪些数据或者功能】相关上下游数据【描述发生质量问题的数据在全行数据流图中的位置，并介绍有哪些相关的上下游数据。】相关上下游系统【描述发生

24、质量问题的数据在全行系统架构中的使用位置，并介绍有哪些相关的上下游系统。】备注【其他说明】数据标准化项目三期数据质量管理体系规划数据标准化项目三期数据质量管理体系规划附件 3 数据质量管理流程1.10数据质量提升工作执行结果评 估、检查及汇报1.7提出数据质量提升工作的牵头和配合部门2、数据质量度量规则管理流程是否提出新的度量规则是否流程说明如下：活动 1.11：总行相关部门及各分支行将日常业务操作中发现的数据质量问题数据质量管理工作小组。活动 1.12：数据质量管理工作小组组织总行相关部门及各分支行根据已有数据质量度量规则进行数据质量检核，发现数据质量问题：1） 数据质量管理工作小组制定数据

25、质量检核方案；2） 总行相关部门及各分支行进行人工检核；3） 数据质量管理工作小组进行工具检核。活动 1.2：数据质量管理工作小组汇总数据质量问题，编写数据质量问题报告。活动 1.3：数据质量管理工作小组组织总行相关业务部门、总行科技部的相关 IT 项目组及相关分支行分析数据质量问题：数据质量管理工作小组相关IT项目组各分支行总行相关部门1.5提出数据质量提升需求1.11数据质量问题提交1.4提出数据质量度量规则1.9数据质量提升工作方案实施1.8制定数据质量提升工作方案1.12数据质量检核1.3数据质量问题分析1.6数据质量需求分析报告1.2数据质量问题汇总数据标准化项目三期数据质量管理体系规划1） 总行相关部门及相关分支行从业务优化层面分析数据质量问题；2） 相关 IT 项目组从技术层面分析数据质量问题。活动 1.4：总行相关部门应根据数据质量问题分析结果，针对已发现但未制定相应度量规则的数据质量问题提出相应的数据质量度量规则。度量规则管理参照数据质量度量规则管理流程（附件 4）。活动 1.5：总行相关部门及各分支行提出数据质量提升需求。活动 1.6：数据质量管理工作小组整合分析结果和数据质量提升需求，编写数据质量提升需求报告。活动 1.7：数据质量管理工作小组提出各类数据质量提升工作的牵头部门和配合部门，报小组领导审批。活动 1.8：各类数据质量提升工