【金蝶】2024数据治理蓝皮书

数据治理背景洞察BACKGROUNDANALYSIS数据治理解决方案SOLUTION数据治理金蝶实践PRACTICE3.1珠江投资加速数据资产沉淀,提升数据价值3.2华西集团释放数据资产价值,提升分析决策效率PARTNE数据治理背景洞察企业信息化现状及问题数据准确性数据错误、不数据准确性数据错误、不致或过时会直接影响决策质量,损害企业信誉。数据来源多样化企业数据来自不同的业务系统、外部合作伙伴、物联网设备等,数据类型和格式日益多样化数据量激增大数据、社交媒体、移动设备等导致数据量急剧增加,对存储、处理和分析提出了更高要求金蝶云·苍穹助力企业数据资产化随着企业运营的复杂性增加,数据量呈现爆炸式增长,系统烟囱式、数据孤岛化问题严重,单一的面向交易和流程的事务性数据无法满足业务数据分析诉求,企业面临的数据管理挑战也日益严峻。营销/电商营销/电商产品数据SRM产品数据CRM产品数据产品数据ERP物流系统产品数据产品数据PLM数据透明度消费者和合作伙伴越来越关注数据的使用方式,要求企业提高数据管理的透明度。数据不可用大量数据被闲置、忽略,不能聚合成为有价值的资产,数据利用率低,衍生价值无法体现。-02-数/据/治/理/蓝/皮/书金蝶云·苍穹1助力企业数据资产化PARTTW金蝶云·苍穹数据治理体系顶层规划:四横一纵以企业数据资源规划(一纵)为核心,全面评估数据现状,确立数据资源架构,确保数据资产的有效管理。在数据治理具体执行层面,通过数据层、数据采集、数据开发治理及数据资产运营(四横)四个方面,构建企业数据资产存、通、治、用的全流程管理体系。现状评估数据资源架构数据资源规划现状评估数据资源架构数据资产运营经营分析客户标签数据服务数据资产入表风险预测数据开发治理数据采集内部数据外部数据结构化数据半结构化数据非结构化数据-05-金蝶云·苍助力企业数据资产化体系化的数据架构是企业数据治理核心L4:实体对象L5:属性L3:业务过程应用价值L1:主题域L2:L4:实体对象L5:属性L3:业务过程应用价值L1:主题域L2:主题动作关键步骤输出数据资源目录数据能力域数据资产体系保障体系PARTTW基于金蝶云·苍穹数据治理的"四横一纵"顶层架构,我们提炼出数据治理的"七步两库"高效策略,通过"接入>预处理>规范>清洗加工>指标化>维度化>服务化"七个步骤,由此构建指标库和专题库,为企业提供精准、高效的数据分析决策支持。七步两库-07-金蝶云·苍助力企业数据资产化指标库专题库指标库专题库数据知识库数据汇聚数据治理数据资产服务(应用)数据量编码转换数据提取元数据提取编码转换数据提取元数据提取数据规范数据元规范字段规范原子指标派生指标接口服务其他服务原子指标派生指标接口服务其他服务人/物/组织时空/事件数据接入空值率类型分布特征分布数据源数据去重-08-PARTTW多源异构数据采集方式汇总涵盖关系型、非关系型数据库、流式数据、结构化非结构化文件。采集方式包括周期性、实时、API接口等,支持全量/增量采集数据形态采集方式采集频率增量方式关系型数据库关系型数据库非关系型数据库非关系型数据库流式数据流式数据结构化文件非结构化文件非结构化文件金蝶云·苍助力企业数据资产化通过分层分域构建数据资产"双态"模式在"双态"模式的数据资产体系中,两个稳态层的数据是经过数据治理(涵盖数据清洗、加工、建模等流程)提炼出的高价值密度数据集,为数据资产的高效利用提供质量保障。数据清洗、数据清洗、数据加工、数据建模、指标开发数仓分层分域面向主题建模指标计算轻度聚合分析型数据标准可复用面向实体建模融合拉通清洗转换操作型数据标准可复用面向应用建模按需所取高度聚合分析型数据面向系统建模应接尽接贴源可溯业务多变组织多变系统多变数据多源PARTTW数据治理与开发实践示意图>Q源系统源系统Mysq\PG数据贴源层(ODS)金蝶云·苍助力企业数据资产化数仓明细层数仓明细层(DWD)数仓汇总层(DWS)数据集市层(ADS)应用与服务-12-PARTTW苍穹平台数据能力矩阵:打造高性能高可靠的数据生产套件数据工作台指标库数字大屏移动轻应用嵌入式分析数据资产平台(一站式数据开发与治理平台)品品大数据基础设施(湖仓一体)-13-金蝶云·苍助力企业数据资产化一站式数据开发与治理平台集成数据采集、数据开发、数据治理、数据服务于一身的一站式数据治理与开发工具,支持企业从"O-1"构建数据标准体系,有效提升企业数据管理和应用效率。品品PB>10万>3<3SPB>10万>3<3S支持处理PB级海量数据2千万条数据聚合分析用户访问并发量支持调度作业数量-14-PARTTW及时性及时性数据创建延迟默认值使用不当数据创建延迟默认值使用不当网络传输过程不可靠传输技术数据校验规则不当文件传输方式出错数据校验规则不当文件传输方式出错取数时点不同步数据源不当数据清洗算法调度机制接口数据获取过程中失真数据转换算法数据加载算法展示方式展示工具硬件平台展示周期软件平台人为调整数据维护验证机制数据存储能力数据备份恢复人为调整数据流程变更维护流程数据测试流程错误数据维护流程数据清洗流程调度流程数据加载流程数据转换流程工______厂取数时点不同步数据源不当数据清洗算法调度机制接口数据获取过程中失真数据转换算法数据加载算法展示方式展示工具硬件平台展示周期软件平台人为调整数据维护验证机制数据存储能力数据备份恢复人为调整数据流程变更维护流程数据测试流程错误数据维护流程数据清洗流程调度流程数据加载流程数据转换流程工______厂-15-金蝶云·苍助力企业数据资产化数据治理的目标是通过数据标准化管理有效提升数据质量在数据治理的领域中,提升数据质量是一项至关重要的任务。为了确保数据的准确性、一致性、完整性、唯一性、规范性和时效性,我们必须深入进行根因分析,从技术、信息、流程、管理方面入手,找到发生数据质量问题的根本原因,为后续开展数据治理工作提供指引,制定出切实可行的解决方案。业务元数据技术元数据完整性准确性一致性唯一性业务系统数据变化周期实体数据刷新周期责任心反馈渠道责任人工作优先级反馈机制奖惩制度奖惩制度执行培训制度培训计划培训内容培训资金培训时间责任心反馈渠道责任人工作优先级反馈机制奖惩制度奖惩制度执行培训制度培训计划培训内容培训资金培训时间PARTTW苍穹平台数据治理能力展示业务场景数据标准确保数据的统一规范和完整,使得企业内部的业务数据、管理数据、技术数据具备统一的管理流程和规范,从而降低内部数据沟通成本。I价值亮点n支持构建基础数据标准和指标数据标准两类不同属性的数据标准,并支持数据标准制定、发布、审核、变更、注销的全生命周期管理。a在创建数据模型时,支持引用数据标准生成模型的属性字段,从而实现数据标准落标及评估。业务场景数据质量管理确保数据的准确性、一致性和完整性,使得企业能够基于可靠的数据进行战略规划、市场分析和业务决策。I价值亮点支持数据标准、模型、元数据、数据质量组合搭配,可自定义质量评估模型。质量报告中可追溯到每张表、每个任务的责任人,对必要情况进行追责。可根据模板定制报告内容,定期生成质量报告。-17-金蝶云·苍助力企业数据资产化I业务场景数据工程师需要连接企业多个不同业务系统的数据源,对数据表进行加工处理,建立统一数据模型,以改善取数口径不致问题,提高模型复用性。I价值亮点n通过图形化的操作,让用户可以轻松高效的创建和处理各种数据表。n基于可视化的建模能力,支持选择字段、过滤、排序、分组汇总、自定义分组、计算字段、关联表、合并表等各种转换能力。I业务场景数据工程师需要统一定义和管理企业的业务指标,建立统一的指标体系以支撑企业经营管理、数据分析和业务决策等场景。I价值亮点支持为企业提供统一、权威的业务指标体系,将分散在不同系统的各类指标集中管理,统一指标口径,避免重复开发,保证指标计算结果的准确性和一致性;n支撑金蝶各业务领域通过轻建模建设专业的、产品化的指标模型体系,助力客户基于行业最佳实践,监控和优化自身业务。-18-PARTTW苍穹平台数据治理能力展示金蝶云·苍助力企业数据资产化业务场景预置基于金蝶业务最佳实践的开箱即用的指标体系,能够迅速对接企业业务需求,提供全面覆盖财务、供应链、制造等核心管理领域,共计标准指标483个价值亮点a减轻了企业自建指标体系的负担,还确保了数据的一致性和准确性。a提升了企业数据分析效率与决策精准度,通过全面覆盖核心管理领域,助力企业快速洞察业务动态,实现持续的管理优化与业绩增长-20-数/据/治/理/蓝/皮/书金蝶云·苍穹1助力企业数据资产化PARTTHRE186亿+营业收入商务服务业186亿+营业收入所属行业8000+员工人数8000+员工人数苍穹产品广东珠江投资股份有限公司成立于1993年,是一家大型综合社会服务商,全国布局城市更新、能源与基础设施、商业、产业、住宅、教育、医疗、文化、科技、金融十大业务板块。截止2023年底,珠江集团总资产超3,600亿元,拥有超7400万f含旧改规划土地储备面积,其中90%位于北上广深,尤其是粤港澳大湾区丰富的土地储备和战略优势,将为其未来发展注入强劲动力。-23-金蝶云·苍助力企业数据资产化业务挑战-24-PARTTHRE解决方案基于金蝶云·苍穹数据开发平台,珠江投资实现了全面的数据资产沉淀,覆盖8大业务领域和18个业务线,构建了1200+个数据指标。通过4大组织平台和5大业务板块,建立了160+驾驶舱及大屏,全面可视化业务关键指标,加速决策过程,并提高数据资产的利用效率。运营分析、财务分析、运营分析、财务分析、投资结算、现金流、精准营销、客户全周期分析···告警、红黄线、结算、预测..客户、员工、数据采集海量存储海纳百川数据采集海量存储-25-金蝶云·苍助力企业数据资产化平台价值满足多维度、精细化分析应用主题指标细化了管理要求,提升管理质量,帮助看清现状,能够灵活支持经营结算对账分析、现金流及经运一体化等应用场景。提升分析效率,更便捷支撑集团T+1准实时分析,满足人干面、不同层级分级授权的报表生成及推送的需求,提升平台效率,实现自助式灵活分析。数智对账结算赋能业务创新整合全面预算、业财指标数据,满足经营思路分析、对账分析及自动结算分析,输出投资经营对账及结算报告,为经运一体化提供数智化支撑。1200+82.1200+82.6%96.1%数据质量提升决策时效提升指标集市驾驶舱&大屏数据质量提升决策时效提升-26-PARTTHRE商务服务业所属行业2万员工人数亿+商务服务业所属行业2万员工人数营业收入数据开发平台苍穹产品四川华西集团有限公司始建于1950年5月,由建工部一局、建工部西南管理总局、四川省建设厅三大系统汇聚而成,1997年改制为四川华西集团有限公司,是四川省属重要国有骨干企业,现列"中国企业500强"第282位,"ENR中国承包商80强"第15位,"四川企业100强"第6位。-27-金蝶云·苍助力企业数据资产化业务挑战华西集团情细化、高质量理不足亟需通过数据驱动业务增长,提升企业管理效率-28-PARTTHRE解决方案数据价值数据治理