数据资产云图白皮书数据资产管理

1、工欲善其事，必先利其器数据资产云图白皮书数据资产云图白皮书数据资产管理第1页2尽管“数据是资产”概念已经广为人知，但“怎样管理数据资产”依然缺乏成熟理论以及工具伎俩数据资产管理是企业或组织采取各种管理活动，用以确保数据资产安全完整，合理配置和有效利用，从而提升带来经济效益，保障和促进各项事业发展。该领域是大数据时代企业布局竞争关键，也是当前市场空白。什么是数据资产？存在什么问题？数据源不规范，造成无效数据加工处理迟缓，造成低效决议加工流程混乱，人力物力浪费评定伎俩缺失，数据资产价值大打折扣分配不透明，数据资产错配定义不统一错误判断分布杂乱，数据资产闲置数据不开放，企业数据合作受限数据库报表文件

2、接口权限视图治理无力应用低效运行缺失数据资产是企业及组织拥有或控制，能带来未来经济利益数据资源。数据资产云图白皮书数据资产管理第2页3 数据资产管理包含哪些关键内容？让企业数据愈加准确、一致、完整、安全，降低IT成本。数据资产治理使得企业数据使用过程更为人性、快捷、智能，从而提升管理决议水平。数据资产应用支持企业数据资产分发、开放、交易等数据嫁接实现，从而促进数据资产价值实现。数据资产运行数据资产云图白皮书数据资产管理第3页4交易所提倡建立一体化全流程数据资产管理体系数据资产规范及治理能力数据资产运行、开放、应用能力数据资产管理体系关键在于有效处理对数据资产进行管理实践性问题，既帮助企业合理评

3、定、规范和治理企业信息资产，又能够挖掘和发挥数据资产价值并促进连续增值，并符合大数据跨行业合作趋势资产质量愈加可靠创新合作愈加便捷运行伎俩愈加丰富数据资产应用有效处置租赁、报损、转换全方面评定资产分布、活性、配置合理性、使用策略使能创新交易、数据开放数据资产运行协同工作数据资产数据规范 管控体系 元模型数据 情景规则 人员组织数据处理 全局洞察 采集加工 快速可视化 运维管控第三方应用加载标准化数据接口、平滑迁移、快速定制快速开发布署效率、质量形式丰富易用数据产品、报表有机融合数据资产云图白皮书数据资产管理第4页数据资产云图：数据资产管理专业管家5数据资产管理平台，涵盖了采集、加工、使用、评定

4、、优化、下线等数据资产全生命周期管理，并基于全方面数据治理能力，深入提供专业化数据资产“管家”服务，包含资产规划、运行管理、开放管理，以及面向企业客户和个人客户不一样类型数据资产应用，从而为大数据时代数据资产管理和增值发展提供全方面支持。数据资产治理数据资产开放管理数据资产运行管理数据资产规划管理数据资产应用应用软件浏览器终端/app电话呼叫微信短信Email内部数据传统数据库新型数据库文档资料数据加工运维管理安全管理质量管理数据体系规划数据标准化管理价值评定增值策略资产活性分析资产配置优化数据采集开发者小区数据交互中心数据资产合作平台数据可视化平台企业客户应用个人客户应用金融-风险识别医疗-

5、传染源定位征信管理个人数据宝库小数据聚合政府-舆情管理注： 数据资产应用内容需要依据详细业务场景定制。数据资产云图白皮书数据资产管理第5页数据资产管理领域，服务于全行业和全客户6特定行业大型企业（如电信、金融、航空、制造等）各行业大中型企业中小企业以及个人客户产品布署+定制化开发产品布署+云化服务SaaS/App管理数据资产掘金经济价值注： 云化服务和SaaS、App等形式当前仍处于规划阶段。数据资产云图白皮书数据资产管理第6页给企业内与数据资产相关不一样角色人员带来价值7能够合理评定、规范和管理企业信息资产，在有效IT投资和降低管理成本同时，挖掘和发挥数据资产价值并增值。企业管理者IT建设部

6、门业务运行人员数据运行人员能够规范数据处理过程、保障数据资产质量、提升IT系统建设效率、快速支撑业务部门运行需要，从而激发创新、表达价值。能够快速、高效提供体验良好数据展现伎俩，经过确保了数据资产质量，从而有利于做出愈加准确业务举措。支持各种数据使用模式，并提供更为丰富、安全数据运行管理伎俩，有利于企业间进行更广泛数据合作并由此创造价值。数据资产云图白皮书数据资产管理第7页8为何传统数据管理方式不适合数据资产管理要求？传统数据管理方式元数据数据稽核管理制度外部性管理，依赖管理力度和执行自律，成难毁易。挑战1挑战2挑战3从范围来看，从形式来看，从内涵来看，非结构化数据、内外部数据混搭、云化处理等

7、都会冲击传统管理模式数据加工复杂度和速度要求越来越高，也对传统管理效率提出挑战数据交换、转让、租赁、交易等各种创新模式，也要求新管理伎俩资产验证数据整合交易保障数据资产云图白皮书数据资产管理第8页不但是技术工具，也是主要运行管理伎俩！9良好界面体验完善规范标准智能化过程控制凝聚了以上电信级数据管理规范和实践经验，形成了一整套管理方法和信息体系全Web界面在线操作提供了丰富可视化组件，能够很好地帮助信息展现、问题定位和决议支持能够依据数据资产实际使用过程进行智能化分析，并动态调整管理过程中规则参数；支持第三方应用集成一站式管理：面向业务人员提供快速取数、自助分析、门户定制等功效；面向技术人员提供

8、可视化运维、自动化处理等工具；面向管理人员提供各种评定告警以及决议支持伎俩；数据治理企业级大数据中心数据处理及可视化框架使能数据开放支持多租户管理、数据开放平台、数据合作加工模式等数据交互模式，并能够很好地确保数据使用过程中隐私安全；数据资产云图白皮书数据资产管理第9页在企业IT系统中定位10网络通信平台主机系统软件主机存放备份OS1.网络通信层2.主机存放层数据存放层db2oraclehadoop3.数据层 平台资产规划资产应用4.应用支撑层资产评定资产运行数据采集数据加工数据管理运维监控业务应用系统应用系统15.应用系统层应用系统5应用系统2应用系统3应用系统4应用系统6分析门户、网站6.

9、信息公布层信息安全体系项目实施方法论支持标准化体系支持gp定位于应用支撑层，在数据治理基础上，实现资产规划、加工、评定、运行等功效数据资产云图白皮书数据资产管理第10页功效架构11数据资产规划数据架构管理数据标准化维度表标准化指标标准化数据资产质量数据资产加工数据流程设计数据模型设计数据处理开发数据应用开发数据测试上线数据运维运行监控告警管理数据评定数据优化存放优化下线管理质量规则管理质量规则检验质量问题管理元数据管理元数据采集元数据分类元数据稽核数据关系分析字段关系分析元数据服务数据资产安全安全策略管理安全漏洞检验权限申请分配安全审计数据处理类 | 数据交换类 | 文件操作类 | 数据查询类

10、 | 数据安全类 | 数据检验类 (函数适配器)Engine for db2db2Engine for oracleOracleEngine for hadoopHadoopEngine for GBASEMPP功能层统一API层生产平台数据地图运行层数据资产应用数据资产评定数据资产运行指标墙自助分析多维报表运行诊疗资产组成份析资产使用评定资产活性分析资产分布评定多租户接入管理数据开放平台BI应用商店数据分发中心数据资产云图白皮书数据资产管理第11页技术架构12数据资产云图白皮书数据资产管理第12页13元数据库元数据库元数据管理开发管理运维监控管理统一日志、通信、控制中心生产运行环境质量管理上

11、线元数据采集1234元数据查询元数据分析元数据维护元数据采集开发过程管理需求开发管理项目开发管理。数据生命周期管理应用生命周期管理进程启停暂时任务管理数据质量采集数据稽核评定问题管理质量汇报运维管理同时开发任务以元模型驱动，连接数据管理，开发、运维和生产运行，形成一体化管理集成架构数据资产云图白皮书数据资产管理第13页14关键特征介绍：完善数据治理与管控（1/5）建立标准体系1数据标准是数据资产管理基础，需要对管理对象，管理要求、管理伎俩、管理流程等进行规范，从而成为海尔相关系统和部门统一遵照标准。具备管控伎俩3针对数据生命周期各个阶段不一样特征，提供各种监控、管理工具，将可能出现系统运行犯错

12、或数据异常改变进行修正或告警，以防止出现更大损失形成信息地图2建立全集团IT信息地图，经过自动化多源头元数据采集，自动分析汇总，形成完整企业数据地图，使用户能够从全局视角审查企业整体数据情况。实现影响分析4实现数据起源追溯，能够方便内部管理、审计或外部监管需求追溯业务指标、报表数据起源和加工过程, 即能方便找到想要数据以及这个数据与其它数据传递关系和业务逻辑关系。促进数据协同5实现跨平台元数据管理，具备数据管控统一功效平台，增强应用协同管理能力,能够展示出数据之间关系，从而促进不一样阶段数据形成协同关系，以及闭环加工流程，确保数据可靠性。连续质量改进6数据质量体系需要经过实践和规划相互促进，不

13、停完善改进，为此，需要确保确保数据架构合理，条理清楚，过程可控，知识积累传承，并经过监控和审计不停促进质量水平连续提升。建立起可管可信数据资产治理体系数据资产云图白皮书数据资产管理第14页15关键特征介绍：完善数据治理与管控（2/5）DMP可连续技术架构体系组织架构与标准规范数据质量智能化数据标准化规范化数据关系脉络化经过对数据、应用、系统综合管理，构建标准化、流程化、自动化、一体化数据管理体系确保数据架构合理，条理清楚，过程可控，知识积累传承。数据资产云图白皮书数据资产管理第15页16关键特征介绍：完善数据治理与管控（3/5）数据标准化制订数据架构管理主数据管理指标数据管理代码标准化管理规则

14、稽核评定提供了完整全方面数据治理与管控功效体系，能够帮助企业实现数据资源条理化、脉络化，成为数据资产化管理主要基础数据采集数据加工数据分发数据共享敏感数据管理质量规则管理问题定位分析影响范围分析问题知识库质量标准定位数据标准化管理专业数据管理高效数据处理连续质量改进可视化开发管理需求分析变更分析知识积累自助分析数据可视化快速响应数据资产云图白皮书数据资产管理第16页17关键特征介绍：完善数据治理与管控（4/5）接口系统提供完整细致血缘分析，对问题节点进行回溯，分析其处理路径上可能存在问题以及相关影响范围应用处理程序数据表全方面追溯数据影响分析，一切尽在掌握数据资产云图白皮书数据资产管理第17页

15、18关键特征介绍：完善数据治理与管控（5/5）一站式统一运维监控为运维部门提供了一个中央管理点，使得运维人员能够紧密有效地对系统上发生事件进行控制，为分布式环境创建一个“任务控制”中心。对搜集到报警信息及时触发各种动作，可经过邮件、短信、语音等方式提醒运维人员对日常监控数据分析，也能够帮助运维人员分析出系统中存在性能瓶颈，方便采取适当处理办法对系统进行优化或扩展。数据资产云图白皮书数据资产管理第18页19关键特征介绍：高效数据资产应用（1/4）需求设计开发调试测试布署、升级文档生成需求设计开发测试上线接口开发程序开发指标开发展示开发数据流程设计数据模型设计规则设计展示设计测试方案测试执行测试汇

16、报测试跟踪需求受理需求分析上线审核上线执行上线跟踪表格组件可视化设置全过程开发管理，提升执行效率，确保数据质量经过数据管理来提升开发效率，而加强开发管控反过来也促进了数据质量有效提升数据资产云图白皮书数据资产管理第19页20关键特征介绍：高效数据资产应用（2/4）报表组件调度类图表组件地图组件流程类邮件触发UI组件小区组件分析导航组件图形组件短信触发规则组件安全服务组件提供方便灵活组合方式，并能和数据组件进行绑定以组件形式确保应用在其内部事务控制动作过滤组件计算组件指标警告清洗组件封装了特定业务逻辑，有明确输入和输出，确保业务规则实现脑图分析路径分析预测分析用户身份信息日志审计安全集成负责BI

17、 Store 应用使用日志统计，以及与经营分析系统安全模块交互进行客户端使用权限控制提供数据获取能力，对获取数据需要提供明确数据指标、指标口径、数据范围、数据时效性等丰富组件库快速帮助实现数据资产应用数据资产云图白皮书数据资产管理第20页21关键特征介绍：高效数据资产应用（3/4）可视化拖拽式开发类Excel报表设计过程无失真导入Excel文件体验良好、可靠高效设计开发过程数据资产云图白皮书数据资产管理第21页22关键特征介绍：高效数据资产应用（4/4）丰富美观、实用大方数据可视化能力数据资产云图白皮书数据资产管理第22页23关键特征介绍：创新数据资产运行（1/3）依据多年经验积累，总结了从数

18、据到资产评定体系，能够帮助企业全方位诊疗发觉问题，并提供对应策略来企业提升数据健康度数据资产云图白皮书数据资产管理第23页24关键特征介绍：创新数据资产运行（2/3）经过标准化数据服务，搭建企业应用开放平台，促进应用百花齐放运行资源稳定性应用上线下线管理应用共享管理信息安全管理统一数据访问接口统一应用运行机制封装好sdk API进行开发信息推送API支持展示组件支持订阅中心数据处理开发；数据高速访问提供数据安全控制数据沙箱提供32类数据开放运行基础平台数据标准化服务基于Api二次开发统一运行环境，主机，数据库等打通与各系统接口。统一数据中心统一开发工具提供可二次开发SDK包应用公布评定管理运行

19、监控下线管理应用类型包含报表，信息推送，手机经分，手机客户端等企业应用商店数据资产云图白皮书数据资产管理第24页25关键特征介绍：创新数据资产运行（3/3）数据分析师ETL开发工程师模型架构师运行程序员数据化运行商业决议产品设计了解业务文档化业务和需求BI产品设计PD业务分析师/数据PD合作搭档合作搭档数据产品PD购置决议行业分析营销支撑分析、挖掘用户需求数据产品设计培训，咨询，处理方案架构师技术框架设计平台与工具实现数据产品开发团体商业智能团体数据开发团体内部用户外部用户基础开发&开发架构使用、建设建设服务能力开放，打造数据资产工厂数据资产云图白皮书数据资产管理第25页26技术特点：DACP

20、拥有八项专有技术基于SQL解析实现透明数据安全访问控制业务指标异常自动发觉算法数据库数据冗余发觉和消除算法基于TopN多维数据诊疗算法多数据库数据分发同时技术基于元数据流程图形可视化技术数据库智能检索技术数据仓库元数据管理技术DACP专有技术2专有技术1专有技术3专有技术4专有技术5专有技术6专有技术7专有技术8数据资产云图白皮书数据资产管理第26页Non-disclosure Confidential Document. Unauthorized Copy Prohibited. Copyright . All rights reserved. 27小结3类 发展方向8项 技术专利9年 产品

21、积累支持第三方应用集成覆盖数据资产全生命周期丰富易用可视化管理与生产有机结合多元化运行伎俩有效数据资产规划评定数据资产云图白皮书数据资产管理第27页主要内容 产品概述 架构功效 布署实施 应用案例 联络我们28数据资产云图白皮书数据资产管理第28页29DACP具备快速集成和布署能力针对已建有信息系统企业，系统提供开放、开源接口，能够和原有系统无缝对接，不影响原有系统使用只要硬件环境满足基础要求，即可新建一套数据置产管理系统支持主流数据库软件，如Oracle、SQL Server、DB2、MySql等只需500G，普通PC硬盘即可满足要求支持开源Tomcat，也支持专业性较高Weblogic和W

22、ebsphere数据库存放WEB服务器普通PC机即可，安装Linux操作系统运行平台布署时对平台要求低新建系统集成升级模式灵活快速安装布署学习方便建设周期短数据资产云图白皮书数据资产管理第29页30参考配置配置说明推荐配置 主机PC Server *2 或小型机尽可能采取独立环境，单台性能提议大于30万TPCC（具备配置视数据量大小调整），作为数据资产云图（DACP）在正式环境关键，必须确保双击热备和7*二十四小时不间断运行 存放运行环境500G，数据存放5T 10T存放系统运行配置信息，日志中心，质量稽核，作业计划调度等（详细配置视数据量大小调整） 操作系统Unix、Linux、Aix、So

23、laris、Windows Server WEB服务器Weblogic、Tomcat数据库Oracle、DB2、Mysql、SQL Server、Teredata支持各种主流关系型数据库数据资产云图白皮书数据资产管理第30页主要内容 产品概述 架构功效 布署实施 应用案例 联络我们31数据资产云图白皮书数据资产管理第31页32经典案例1：助力数据治理、提升工作效率类别末端原因人员缺乏对现有系统学习伎俩离职或变动数据源数据自相矛盾复杂规则设有被充分了解变更带来质量问题开发过程时间太担心业务规则了解错误需求了解不准确缺乏测试标准和方法质量管理质量监控规则不好把握系统构架设计中缺乏质量考虑质量监控带来过多性能开销优化构架质量控制1234全过程开发管理全过程质量管理元数据管理引入DACP平台质量管理开发过程数据源人员质量连续改进人员培训周期由3个月缩短至5天元数据覆盖度从30%上升至98%问题查证率提升50%节约人力资源成本30%客户现实状况：1、BI系统经过以上建设，超出10万张数据表、1600个以上应用，容量超出100T2、存在多厂家合作开发，数据