大数据服务能力成熟度模型 第1部分：总体框架（报批稿）

团体标准Bigdataservicecapabilitymaturitymod中国通信标准化协会发布I III IV V 1 1 1 2 2 3 3 3 3 3 3 3 4 4 4 4 4 4 4 4 5 5 5 5 5 5 5 5 6 6 6 6 6 6 6 6 7 7 7本文件按照GB/T1.1—2020《标准化工作导则第1部分：标准化文件的结构和起草规则》的规定请注意本文件的某些内容可能涉及专利。本文件的发布机构不承担识别这些专利的责任。份有限公司、杭州数梦工场科技有限公司、杭州数澜科技有限公司、厦门渊亭信息科技有限公司、北京友盟网络科技有限公司、北京国双科技有限公司、华为技术有限本文件主要起草人：姜春宇、马鹏玮、王卓、刘思源、李雨霏、高倩倩、张志强、张云昊、禹在相关数据要素政策推动下，各行业数字化转型进程加速，对大数据服务的需求持续攀升。目前大数据服务产业仍处于发展初期，供应商的服务内容缺乏有效指导，服务水平参差不齐，为企业进行供应商选型带来了挑战。大数据服务能力成熟度模型系列标准是为规范大数据服务流程、提升大数据第2部分平台建设。目的在于规范大数据服务中平台建设的服务第3部分数据管理。目的在于规范大数据服务中数据管理第4部分应用开发。目的在于规范大数据服务中应用开发的服理、应用开发三类服务类型，以及其相应的基本V版权声明本技术文件的版权属于中国通信标准化协会，任何单位和个人未经许可，不得进行技术文件的纸质和电子等任何形式的复制、印刷、出版、翻译、传播、发行、合订和宣贯等，也不得引用其具体内容编制本协会以外各1大数据服务能力成熟度模型第1部分：总体框架本文件规定了大数据服务能力总体框架、成熟度等级划分以及平台建设、数据管理、应用开发三本文件适用于各类大数据服务供应商服务能力的评价与指导，可供各行业组织参考，也可作为衡下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中，注日期的引用文GB/T35295-2017信息GB/T36073-2018数据管理能力成熟度评GB/T35295-2017和GB/T36073-2018界定的下列术语和定义适用于本大数据参考体系结构bigdatareferencearchi一种用于工具以便于对大数据内在的要求、设计结构和运行进行开发性探讨的高层注：比较普遍认同的大数据参考体系结构一般包含系统协调者、数据提供这、大数据应用提供者、大数据框架提2），在指定条件下使用时，数据的特性满足明确的和隐含的要求的程4缩略语ETL：数据提取、转换和加载（Extraction-Transformation-Load大数据服务能力主要指大数据服务供应商为用户提供全方位大数据相关工作建设的能力，具体包3大数据服务能力成熟度模型全面覆盖大数据服务，评价指标维度囊括过程、资源、技术、成效图1大数据服务能力总体框架建立初步工作流程，可被动地根据需求及问题作出反应，能够完成建设目标，但是有一定的偶然具备一定的项目实施经验，形成组织内通用流程，通过一定的流通和经验保障目标达成的成功将较为丰富的经验形成了知识库，制定专门的实施流程，有基本的技术支撑流程的开展，有基本完善已有的流程制度，建立交付物质量和服务管理体系的评估指标，有适用4平台建设主要指以构建基础大数据平台工具为主要目的大数据服务，整体服务主要包括资源评资源评估过程主要指平台建设服务提供方根据需求方业务系统、场景、目标等各项需求，对于构建平台涉及的构建基础、可行性、风险等各维度进行评估。可划分为基础设施评估、业务环境评估，其中基础设施评估主要包括对于实现业务系统及场景需求所需要的计算、网络、存储等基础设施的评估，业务环境评估主要包括对于待建平台的系统架构及需求方业务需要的数据架构、数据形态等进行规划设计过程主要指平台建设服务提供方对于构建平台的过程和需要考虑到的各项特性进行规划设计。可划分为资源规划设计、应用规划设计、安全规划设计，其中资源规划设计主要包括选择构建平台时涉及的部署模式以及进行其他相关的资源配置、产品选型流程，应用规划设计主要包括对于构建平台时需要考虑的性能、可扩展性、高可用性等特性的规划设计，安全规划设计主要包括构对于建方案设计过程主要指平台建设服务提供方根据前期的评估及规划设计，对于平台构建的实施过程进行方案设计并对其中可能出现的实施风险提出应对预案。可划分为实施方案制定和实施风险应对两部分，实施方案制定包括对于实施范围、实施流程等的设计以及对于实施工具的选择以及其他实施方案细节的制定，实施风险应对包括对于实施过程中可能出现的数据、系统、业务异常情况提前提出相实施执行过程主要指平台建设服务提供方进行平台构建具体实施的过程。可划分为平台工具部署、数据迁移，其中平台工具部署主要包括平台构建实施过程中新建平台工具、对于存量平台工具进行升级、对于关键系统联调等实施步骤，数据迁移主要包括平台构建实施过程中的历史数据迁移、关实施验证过程主要指平台建设服务提供方完成平台构建实施过程后，对于平台能力、数据是否满足需求和原本规划设计进行验证。可划分为平台能力验证、数据验证，其中平台能力验证主要包括对于平台的功能、性能、可靠性、安全性进行验证，数据验证主要包括对于迁移到平台中数据的一致5交付过程主要指平台构建实施验证流程均结束后，服务方将建设好的平台交付给需求方的过程。可划分为培训和交付实施两部分，其中培训主要包括对于人员的培训和相关文档的交付留存，交付实施包括具体交付内容的交付过程以及对于整个交付过程的管资源运维过程主要指在平台构建实施交付完成后，服务方对于平台的基础设施资源进行持续性维护的过程。基础设施资源运维主要包括对于平台使用的计算、网络、存储等资源进行修复、更新、升运维管理过程主要指在平台构建实施交付完成后，服务方对于平台进行延续性的维护过程。可划分为资源储备、平台运维、问题管理、变更管理等部分，其中资源储备主要包括服务方对于提供运维管理能力所需要的服务台、工具、备件、知识库等资源进行储备的过程，平台运维主要包括服务方持续的提供平台版本升级、集群扩容、平台监控等运维服务，问题管理主要包括针对需求方中反馈的问题进行管理和处理，变更管理主要包括针对需求方在使用过中提出的部分需求变更进行管数据管理主要指以实施数据治理、开发运维数据全生命周期过程为核心的大数据服务，整体服务主要包括需求管理、资源评估、规划设计、方案设计、实施执行、交付、数据运维、平台运营等过需求管理主要指数据管理服务提供方通过采集需求方的业务需求、数据需求等，明确数据管理目资源评估主要指数据管理服务提供方针对数据资源、计算资源、人力资源、业务系统环境等数据管理实施关键影响因素，开展数据资源评估、计算资源评估、人力资源评估、业务系统环境评估的过程。数据资源评估对象主要包括数据规模、数据类型、数据更新频率等，计算资源评估对象主要包括数据环境（包括数据库环境、数据仓库环境、数据集成环境、数据应用环境等）、计算机硬件资源、数据管理实施工具，人力资源评估对象主要包括数据管理实施人员、数据管理交付人员、数据管理运实施准备主要指数据管理服务提供方为确保数据管理的有效实施，制定实施规划，并建立组织保障和开展风险管理的过程。实施规划主要包括实施方案、实施人员、进度安排，组织保障主要包括认责机制、流程机制，风险管理主要包括实施风险应对方案、财务风险管理、人力资源风险管理、应急6方案设计主要指数据管理服务提供方针对数据标准、数据模型、数据质量、元数据形成的规范性文档，以指导数据管理的实施。数据标准制定内容主要包括数据标准体系（包括数据标准范畴、数据模型、维度模型、数仓分层、模型加工逻辑，数据质量设计内容主要包括数据质量检验维度、数据质量稽核规则、数据质量稽核报告模板、数据质量考核，元数据设计内容主要包括元数据类别、元数据方案实施主要指数据管理服务提供方依据方案设计，开展数据盘点、数据汇聚、ETL开发、数据质量稽核、元数据开发的过程。数据盘点主要包括明确数据分布、构建数据目录，数据汇聚指抽取各数据库中源数据至数据仓库的过程，主要包括数据抽取、数据加载，ETL开发指完成数据抽取-转换-加载的任务调度，主要包括ETL任务执行、ETL监控，数据质量稽核主要包括执行稽核任务、生成稽核报成果交付主要指数据管理服务提供方完成数据管理9.1概述应用开发主要指以根据需求方业务需求构建数据分析应用为主要目的大数据服务，整体服务主要包括需求管理、资源评估、规划设计、实施执行需求管理主要指应用开发服务提供方同需求方沟通确定待构建分析应用的主要需求的过程，主要包括商业目标分析、数据需求分析。其中商业目标分析主要包括行业知识梳理、业务梳理等内容，通过对需求方所在行业及其业务的梳理分析明确进行分析应用构建的商业目标。数据需求分析主要指根资源评估主要指应用开发服务提供方根据需求方确认的具体需求对需求方现有资源情况进行评估的过程，主要包括数据资源评估、计算资源评估、人力资源评估、业务系统环境资源评估等。分别相应的对需求方现有的可分析数据、可使用计算资源、具备分析应用专业知识的技术人员、待对接分析9.4规划设计规划设计主要指应用开发服务提供方根据前期需求分析及环境评估结果对实际要提供的分析应用实施执行主要指应用开发服务提供方进行实际构建的过程，主要包括数据准备、模型构建、模型评估、应用等。其中数据准备主要为分析应用构建前期收集数据、探索数据、进行数据预处理的过程。模型构建主要为分析模型构建技术选型、方案设计、实际建模的过程。模型评估主要为模型评估7方案设计、实际模型评估的过程。应用主要为模型完成后通过数据可视化、用户行为分析等一种或多交付主要指应用开发服务提供方在完成分析应用的完整构建后进行实际交付的过程，主要包括模9.7运维管理运维管理主要指应用开发服务提供方在完成分析应用构建并交付后持续提供运维服务的过