SAP_HANA 2016

1、Use this title slide only with an imageSAP HANA 产品概述 2014 SAP SE or an SAP affiliate company. All rights reserved.2InternalSAP大数据方案总体架构监控展现PC数据分析手机Pad监控屏幕分析应用层商务智能（商务智能（BO）指标综合展现分析GIS展现分析主题分析自定义分析系统管理数据挖掘（InfiniteInsight）回归分群时间序列关联分析社交分析数据管理层HANA内存计算分析模型IQGIS文本分析列式存储DQPAd-Hoc数据库内分析SDA整合层业务数据O域业务(ASE

2、)B域业务业支GIS系统EIM数据集成数据质量元数据管理产品介绍 2014 SAP SE or an SAP affiliate company. All rights reserved.4InternalHANA+IQ： SAP数据分级策略 频繁读写的数据 在内存操作 所有功能，没有限制 只读数据 数据不在HANA中，但是通过HANA的SDA技术可以访问 IQ列式存储- 高效，低硬件成本 高压缩比 低存储成本storage costs HANA的扩展存储 HANA 管理IQ的表和数据 优化的数据传输Providing lower TCO by optimized data volume ma

3、nagement热数据(HANA)温数据(IQ) 2014 SAP SE or an SAP affiliate company. All rights reserved.5InternalHANA+IQ 新的吉尼斯数据仓库记录 2014-02-17Largest Data WarehouseAudited Record: 12.1PBSAP HANA 5台 HP ProLiant DL580 G7服务器 4个激活节点、1个备用节点 存储 6.2 TB数据SAP IQ SAP IQ multiplex运行在20台HP ProLiant DL580 G7服务器 12.1PB原始数据 入库后仅剩3

4、.1PB测试环境配置测试环境配置25* HP ProLiant DL580 G7 - 4 x Xeon E7-4870 - 1TB RAM20* NetApp Storage E5460 - 60/120 x 3TB, 7.2Krpm - 4 FC connections SAP IQ (20节点)SAP HANA(5节点)BMMsoft Federated EDMT 9Red Hat Enterprise 6.4更多信息，请访问http:/ 2014 SAP SE or an SAP affiliate company. All rights reserved.6InternalHANA创新

5、技术解决大数据问题行与列并存追加式更改最小化投射非结构化数据虚拟汇总数据分析多核计算数据压缩分区统一SQL多种布署方式数据生命周期多节点并行快速扩展空间数据Map Reduce组键索引内存计算块加载统计业务功能 2014 SAP SE or an SAP affiliate company. All rights reserved.7Internal大数据应用场景商务分析商务分析常见问题1.数据定时加载，无法实现实时数据分析2.需要定时做汇总，导致汇总与明细可能不一致3.数据仓库体积超大，很难维护4.响应时间在分钟或小时级别，导致用户体验极差5.无法满足用户个性化的、自助式的即席查询需求HAN

6、A技术亮点内存计算 列式存储 最小化投射 数据压缩多节点并行 虚拟汇总 组键索引 块加载解决方案商业智能系统经营分析报表系统 2014 SAP SE or an SAP affiliate company. All rights reserved.8Internal内存运算q 磁盘I/O是瓶颈qI/O 瓶颈导致延迟及CPU的低效利用q 关系型数据库为处理交易数据而设计 (OLTP)q 数据存储的方式无法高效满足分析需求q 80% 的 BI 查询使用不到20%的获取的行数据MemoryI/OCPU 2014 SAP SE or an SAP affiliate company. All righ

7、ts reserved.9Internal列式存储传统关系型数据库c5c4c3c2c1c9c8c7c6r1r2r3r4r5Hanac5c4c3c2c1c9c8c7c6r1r2r3r4r5 数据垂直存储数据垂直存储 每个列都是单独存储的每个列都是单独存储的 数据就是索引数据就是索引 查询时只读取需要的列查询时只读取需要的列 极大地降低了系统的极大地降低了系统的I/O 每个列由独立的线程处理每个列由独立的线程处理查询并行处理查询并行处理 数据按行（记录）存储数据按行（记录）存储 查询通常需要大量的查询通常需要大量的I/O，尤其在无法利用索引的，尤其在无法利用索引的情况下情况下 建立索引非常耗时和耗

8、资源建立索引非常耗时和耗资源 为了获得查询效率不得不大大增加数据库的硬件为了获得查询效率不得不大大增加数据库的硬件配置配置 2014 SAP SE or an SAP affiliate company. All rights reserved.10InternalSAP HANA的集群扩展集群可支持1100个节点的动态扩展Share Nothing架构集群中可支持多个备份节点 2014 SAP SE or an SAP affiliate company. All rights reserved.11Internal1PB原始数据的基准测试结果http:/ IBM X5 Server原始数据

9、：10年历史数据1.2万亿条记录1PB原始数据入库后：49.2TB 2014 SAP SE or an SAP affiliate company. All rights reserved.12Internal1. 创建Attribute views(维度、层次)(可选)2. 创建Analytical views(即维表+事实表)3. 创建(Graphical 或 Script) Calculation Views ，实现更复杂的运行（可选）4. 在BI访问Analytical or Calculation ViewsAnalytical ViewAttribute ViewColumn Ta

10、bleCalculation ViewHANA 是一个商务智能分析服务器 2014 SAP SE or an SAP affiliate company. All rights reserved.13Internal大数据应用场景风险管理与合规风险管理与合规常见问题1.数据挖掘速度在小时或天级别，挖掘时间成本很高2.挖掘算法太少3.数据太杂了，不知道该挖哪些数据HANA技术亮点内存计算 列式存储 R引擎 KXEN数据分析 多核计算 多节点并行 Map-Reduce解决方案全面风险管理系统反洗钱系统事后监督系统综合监管系统 2014 SAP SE or an SAP affiliate comp

11、any. All rights reserved.14InternalHANA 是一个数据挖掘服务器Data2-5yearsSQLR clientR Model 1R Model 2R Model 3HANASAP Predictive AnalysisPALHANA StudioR Environment 2014 SAP SE or an SAP affiliate company. All rights reserved.15InternalH2 SAP HANA 和 Hadoop的威力 2014 SAP SE or an SAP affiliate company. All right

12、s reserved.16InternalHANA在反洗钱项目的测试结果可疑交易挖掘 运行可疑交易分析程序，执行时间跨度为一个月（4月23日 5月24日） HANAOracle提升提升40s 2625s66x 红冲数据清理 运行红冲数据清理程序，对全量（20G）数据进行红冲操作，红冲数据量200M。 HANAOracle提升提升15s 407s27x 2014 SAP SE or an SAP affiliate company. All rights reserved.17Internal大数据应用场景客户关系客户关系常见问题1.无法做到实时分析、决策2.多系统数据同步，导致维护工作难度大3

13、.存在大量非结构化数据，无法处理HANA技术亮点内存计算 行与列并存 数据分析 统一SQL文本引擎 空间数据引擎 追加式更改对应长亮方案客户信息管理系统客户关系管理系统个人征信系统企业征信系统 2014 SAP SE or an SAP affiliate company. All rights reserved.18InternalHANA 强大文本数据处理能力n支持31种语言n自动生成分词n最大支持300个字符n准确率极高n支持大并发SAP Social Customer Engagement 2014 SAP SE or an SAP affiliate company. All rig

14、hts reserved.19InternalHANA支持GIS信息，给应用带来无限想象n实时的地理信息处理n优化的地理信息分析n准确率极高n支持大并发 2014 SAP SE or an SAP affiliate company. All rights reserved.20InternalHANA众多合作伙伴HANA认证的服务器HANA认证的商务智能套件HANA认证的预测分析软件HANA认证的ETL工具 2014 SAP SE or an SAP affiliate company. All rights reserved.21InternalHANA带来IT架构简化革命交易性数据分析性

15、数据分析性Cube文本数据TextColumnRow传统系统全新系统nOLTP和OLAP并存n同时支持结构化和非结构化数据n无需做汇总，无需实例化Cuben线行扩展，支持超大并发 2014 SAP SE or an SAP affiliate company. All rights reserved.22InternalHANA 与ExaData竞争分析一体机是的是的开放的硬件提供商和8家世界顶级PC服务器厂商认证私有硬件支付Shared Nothing的MPP支持不支持纯内存全部数据加入内存计算传统的数据缓存技术列式存储支持纯列式存储不是真正的列式存储，只是在行式存储上增加了便于列式读取的索

16、引，即费时、又费空间数据压缩很高的压缩比数据没有压缩计划引擎内嵌计划引擎无计划引擎 2014 SAP SE or an SAP affiliate company. All rights reserved.23Internal案例1：某世界500强公司内部IT测试数据来自ERP/CRMDM层DM层DM层DM层DWIDWROBIEE展现SAP BO 4.0展现原始数据库表(非汇总)DataStage抽取虚拟建模虚拟建模华为R5885 PC服务器HANAData Services抽取 2014 SAP SE or an SAP affiliate company. All rights reser

17、ved.24Internal案例1 ：硬件配置对比SAP HANA的测试硬件采用华为R5885 PC服务器方式：单机IOPS: 15万交换机：无网络：千兆以太网Oracle Exadata测试硬件Oracle V1，V2的两个满配的一体机方式：集群IOPS: 100万 + 150万交换机：有网络环境：40GB，万兆Infiband 2014 SAP SE or an SAP affiliate company. All rights reserved.25Internal案例1 ：测试报告总结测试方法ExadataHANA提升读取SELECT/JOIN-7个表(从2亿1千万条算出1.3亿条数据

18、)25分28秒90秒16.8倍写入查询出3亿数据，再写入DB139小时以上终止4小时34.8倍计算运行成本费用报表SQL270秒4秒67.5倍计算运行复杂耗时SQL-报表（4亿2千万条）18小时后，人工终止4秒12000倍+计算运行复杂耗时SQL-MCA（3亿八千万）18小时后，人工终止15.7秒16000倍+并发20个并发-测试MCA复杂SQL 1个并发-1000分钟+20个并发-未知63秒-平均1000倍+报表收入多维度分析报表-全部展开364秒5.7秒63倍产品报价 2014 SAP SE or an SAP affiliate company. All rights reserved.27InternalHANA报价 Limited Edition for OEM (RUNTIME)SAP HANA EngineSAP HANA StudioSAP BusinessObjects Data Integrator * 用量折扣1 - 10 units100.00%11 - 20 units93.75%21 - 50 units83.13%51 - 100 units62.50%101 - 150 units50.00%151 - 200 units43.75%201