中国邮政大数据平台SAP方案v0.ppt

1、,中国邮政大数据平台SAP,SAP 中国,议程,邮政大数据平台业务需求以及SAP理解 SAP大数据解决方案 数据交换平台 数据仓库平台 数据管控平台 数据的展现与可视化 项目实施整体规划 SAP大数据平台的相关案例,邮政大数据平台业务需求以及SAP理解,企业数据成熟度分析，每提高一个成熟度，将带来巨大的业务价值,业务场景成熟度,大数据发挥的业务价值,最难跨越的阶段,目前阶段,中国邮政大数据平台建设的总体要求,云计算落地应用,企业数据归集,全企业数据支撑,推动企业数据治理,支撑数据 分析,提高数据利用率,实现大数据、云计算等新技术的落地应用，为其他系统建设探索经验，开启邮政云时代,建立企业级数据

2、中心，实现企业数据统一归集，促进企业数据共享，成为企业唯一真实数据来源,促进企业数据共享机制建立，为生产、经营、管理、决策提供数据服务,5,构建企业数据管控体系，实现邮政数据安全、标准和质量的集中管理，固化数据管控流程，推动企业数据治理。,统一整合企业内外部结构化、半/非结构化数据资源，提高企业数据利用率。,推动大数据分析，挖掘邮政数据潜在价值，为企业战略决策、业务协同、风险管控等提供有力支撑。,提高数据成熟度，发挥大数据价值，应从五个方面入手,建立数据场景或KPI体系,组织架构创新，以适应大数据发展需要,进行数据质量、元数据治理,建立统一的可扩展大数据分析平台,数据流程和制度标准化,邮务数据

3、源,速递、物流数据源,金融数据源,ERP数据源,邮政外部数据源,非结构化数据源,其它系统数据源,流数据(ESP),数据复制(SRS),ETL(Data Services),ESB(PI),数据管控平台,主数据治理(MDG),元数据管理(信息管家),数据质量管理(Data Quality),数据标准管理,数据安全管理,企业级数据仓库平台,A-CRM数据源,SAP HANA,分析,SAP BusinessObjects BI 探索, 仪表盘, 报表, 图表, 可视化,SAP Lumira,数据分析与可视化,SAP 移动平台 (BI Mobile, Mobile Application),SAP P

4、redictive Analysis 预测分析,中国邮政大数据平台建议架构,数据交换平台,历史数据、非机构化数据,Hadoop分布式文件系统,Hive,Pig,Spark,扩展数据层（冷存储）,结构化历史数据,扩展表磁盘数据,结构化实时数据,热表,扩展存储(定义),SDA,vUDF,Vora,ODS、EDW Data Mart,温存储（动态分层）,热存储（内存计算）,数据老化 自动搬移,DLM,量收数据,SAP建议数据平台的主要特点,HANA RDS(快速实施服务),SAP产品能够覆盖邮政大数据平台的几大功能模块 SAP HANA同时满足企业数据仓库的ODS、EDW和Data Mart的需求

5、部署方式灵活：企业预置型与云部署 SAP在全球有大量的实施案例,以内存计算为核心的大数据处理平台 基于HANA简化企业EDW的复杂度 SAP在内存计算领域排名第一 大数据领域软件供应商的领导者 理念领先，互联网+与工业4.0的主要倡导者 能够提供基于产品的快速部署和开发服务,遵循业界通用的接口与开发标准 支持开源的数据处理技术，如Hadoop 能够与Hadoop/Spark等进行深度的技术j集成 可结合开源产品实现邮政集团数据生命周期管理,借助SAP提供的全面解决方案，中国邮政可构建敏捷、高效能的大数据平台，从而消除业务复杂度，提升企业整体洞察力,数据交换平台,邮政大数据平台整合给类型数据源,

6、数据抽取 数据清洗 数据合并 数据排重 等操作,金融板块数据源,速递物流板块数据源,邮政板块数据源,ERP数据源,邮政外部数据源,各类非结构化数据源,结构化数据,非结构化数据,非结构化 数据读取解析,邮政企业级数据仓库,SAP的数据服务方案全面考虑数据集成, 数据质量管理, 数据切面及非结构化数据获取问题,支持访问全部关键业务数据(任意数据源,类型和领域), 一体化平台全面解决数据的清洗、排重、归并、衍生、合并、统计、汇总等一系列数据加工问题,结构数据,非结构数据,一个运行时架构及一系列服务,业务界面,统一的元数据,技术界面,数据服务解决方案包,统一的管理环境(调度, 安全, 用户管理) 一套

7、源/目标,各类型数据库： Oracle DB2 Sybase ASE Sybase IQ SQL Server Informix MySQL Teradata HP NeoView Netezza ODBC SAP HANA,全面接口支持,各类型技术接口： Text delimited Text fixed width EBCDIC XML Cobol Excel HTTP JMS SOAP(Web Services) JSON,SAP BusinessObjects Data Service性能强劲的执行引擎,使用便捷的开发工具 所有的任务在统一的图形界面开发 易于使用，拖拽界面 内带数据预

8、览、结构分析、清洗和调试 交付可信赖的信息 集成数据质量管理 跨越BI环境的元数据管理 端到端冲突分析 简化变动管理 性能强劲的执行引擎 通过高性能并行架构支持网格计算 最好的企业应用连接性 实时和批处理数据整合,SAP SRS （SAP Replication Server）复制数据,HANA ODBC,SAP Sybase ASE Oracle MS SQL IBM DB2/UDB,SAP Sybase Replication Server for HANA,DB,DB,DB,HANA,LAN,WAN,HANA,HANA,SAP Sybase Replication Server for

9、HANA,实时或定时复制数据到HANA,数据仓库平台整体框架,真正实现“实时”，业务洞察力,什么是SAP HANA？ SAP HANA 是一个先进的平台，使用内存计算技术来实现企业应用 数据驱动业务，在大数据下实现实时处理 简化IT的系统部署，可通过云方式交付,SAP HANA为企业带来的好处 创新平台，并且在应用中不会中断原有系统应用，实现大量数据的高速处理 提供实时访问，实时复制服务和数据集成功能 完整和即时的洞察力与灵活 的数据计算引擎，提供预置的报告和分析模型 简化IT架构，多用途的内存计算平台减少数据处理层次,基于HANA的大数据平台,现状: 大数据平台数据规模庞大，数据增长速度快，且数据类型多样（结构化、非结构化）。今后可能会集成更多的外部数据,大数据平台的数据温度管理策略,数据管理策略（由业务应用主导定义）,: 更高效地管理海量数据，降低整体拥有成本 HANA与温数据层、扩展数据层深度集成，提升系统性能 一体化的数据管理品台，降低系统复杂度 高度可扩展的架构,Hadoop SAP BW重新部署至HANA平台，并集成非SAP BW数据; 按需求逐步把CDW移植到SAP HANA平台之上; 利用近线存储作为温数据处理层; 利用Hadoop技术处理大量非结构化数据（目标）;,绝大部分数数据仓库模型都将通过虚拟化模型实