企业存储资源池架构解决方案

1、企业存储资源池架构解决方案IT资源池总体目标IT资源池的模式改变了传统IT系统的资源配置模式，使得IT系统的资源配置更灵活、高效。未来，资源池需要在资源、管理、服务方面协同演进，构建“低成本、高效率、自动化”的资源服务平台。IT资源池的目标是有效的管理IT资源，并通过网络方便、实时地为用户按需提供服务和产品。资源管理服务全类型：服务器（小型机/x86、物理机/虚拟机）、存储、网络、软件全兼容：兼容所有虚拟化软件及硬件厂家全覆盖：覆盖业支与管信所有系统资源池内资源使用可灵活共享、高效资源全生命周期管理资源配置管理自动化资源维护管理自动化资源安全管控自动化将资源打包成标准化的服务对外提供服务申请、

2、使用、回收全流程管理资源计量与监控云资源池目标架构蓝图APP集成平台门户决策支持云管理平台物理资源层x86服务器小机服务器存储设备网络设备中间件数据库分布式计算虚拟资源池平台服务资源提供层池化资源层物理资源池资源动态分配虚拟机虚拟磁盘虚拟网络操作系统应用服务物理资源自服务门户其他流程管理资源管理资源调度资源监测云管理平台：自动化服务运营平台，提供统一监控，服务管理和安全保障资源提供层：动态调度和分配资源池资源，向上提供物理或者虚拟资源池化资源层：虚拟化软件平台，提供物理设备整合，池化与资源的细粒度切分物理资源层：物理设备的集合云资源池（红框部分）的核心特征 资源共享和分级保护 统一监控和管理

3、动态调度，按需服务 自动化运维存储资源池特性需求总结存储基础架构相对稳定，在出现新系统部署、存储性能需求提升、存储容量提升等需求下，基础架构无需做太大调整（如设备搬迁、长时间的停机数据迁移等工作）即可平滑扩展和提升。既可以满足远期部署规划，又可以应对短期突发性的容量、性能增长要求。结合硬件设备自身生命周期的规律，数据可以平滑、在线的从旧的设备迁移、流动到新的设备上。从另一角度来看，使用年限越久的设备，可以平滑的在现有架构下从关键生产系统逐步转移作为二级、测试设备使用。充分利用各存储设备的性能和空间，避免出现使用不均、分配不合理的现象。根据规划或突发性的变更需求，依据业务类型的特征来分配最合理的

4、资源，例如将容量、性能要求高的系统数据平滑迁移部署到最合适的高端设备（包括设备、介质、RAID类型、缓存等资源）上，反之亦然。在共享硬件资源的基础上，不同业务数据需确保性能不相互干扰、数据访问可完全独立。SLA及QoS保障。便于统一管理、统一维护，在单一界面中可直观管理资源池中所有的存储设备，监控其运行状况，第一时间感知故障或隐患。平滑扩展、均衡部署统一管理透明流动可靠性及QoS共享存储资源池建设的几大难点及挑战1是否只有采用分布式、软件定义式（SDS）的存储技术才可以满足共享资源池中爆发式的数据空间和性能的增长要求？2 41是否采用一种存储架构就可以满足所有业务类型的数据存取要求？是否只有采

5、用基于硬件的存储虚拟化技术才可以解决异构存储统一整合管理的问题？3 如何解决存储资源池中统一管理、高效维护、快速故障定位分析的问题？4存储资源池架构选型是否单一的存储架构就可以满足所有业务类型数据的存储要求？业务类型应用举例存储要求适用性存储架构（常用）空间要求性能要求其他核心业务数据库、传统SQL类型数据库计费数据库ORACLE一般极高OLTP类型、随机读写为主、性能主要依赖IOPS和延迟指标FC-SAN结合ASM+InfiniBand+SSD加速可基于多节点X86平台组建存储环境普通业务平台（含数据库）OA、网管高高业务种类多、整体数据增长快IP-SAN或FC-SAN基于新型分布式软件体系

6、构建的平台Hadoop HDFS、HBASE、Vertica、MySQL极高高OLAP为主、数据量增长极快、软件体系决定了可采用分布式存储或本机存储彻底的分布式架构及去存储化，多采用X86服务器的本地硬盘即可满足要求基于文件共享类型的服务视频类极高一般一写多读、文件数量多、更注重存储带宽性能FC-SAN或NAS多采用大容量、低速硬盘云存储服务网盘极高一般数据量增长快对象存储尽可能以廉价的硬件提供存储服务数据保护备份、归档极高一般备份期间对系统性能会有影响NAS、虚拟带库、带库虚拟机平台VMWARE承载以上各类应用、故数据量增长极快、整体性能要求高FC SAN、IP SAN、NAS结论不存在通用

7、的分布式处理系统，更不存在通用的分布式存储系统多样化成为必然上层架构的变化有规律可循基础设施硬件层面，应注重对上层架构的支撑和补足不同业务类型对数据存储的要求不同不同存储架构适用的存储场景也不同分布式存储SDS存储不能满足所有业务场景的存储需要不同的业务系统对数据存储的可靠性要求、隔离性要求并不相同，单一存储环境会带来极大的安全风险。存储资源池架构选型资源池需支持多种技术及架构混合并存资源池需支持分级、分域组建在统一资源池存储管理平台的基础上，组建融合存储资源池融合存储资源池化组建策略子域划分原则：以业务类型的数据存储特点以及承载的软件计算技术架构为依据FC-SAN/全闪存资源池：承载核心系统

8、数据库或虚拟机。可适当补充存储虚拟化技术搭建专用资源池，利旧退服设备。通用X86平台存储资源池：基于通用X86硬件特别是大容量存储型服务器，自身不直接提供存储服务。可通过具体的软件定义或计算架构定义将其具象为IP-SAN资源池、NAS资源池、对象存储资源池等。IP-SAN资源池：建议采用SDS分布式技术架构，承载一般系统的块存储需求，可为虚拟机，一般数据库提供存储服务NAS资源池：建议采用SDS分布式技术架构，提供NFS，FTP，Samba，CIFS等文件服务，可为视频点播等业务提供存储服务对象存储资源池：提供廉价，冗余的文件和对象存储，可为网盘等业务提供存储服务备份资源池：提供所有业务系统数

9、据的备份、归档和恢复存储资源供应层：集中的虚拟化管理平台一切资源池设备通过统一的供应层实现资源供应虚拟化，资源具象为虚拟的卷、空间、节点等形式，统一向上层计算架构供应存储能力。并实现回收、备份、容灾等高级功能。分级原则：灵活性与隔离度的平衡基于不同业务的重要性和优先等级，划分通用和专用存储资源池，例如为核心CRM系统划分专用存储池，保证物理隔离并实施安全策略，提升保护级别。为网管类系统划分通用存储资源池。不同技术类型的存储资源池均可定向至通用资源池和专用资源池。针对存储资源池制定SLA优先级，例如构建生产、测试/开发存储资源池，利旧存储资源尽量往SLA等级较低的资源池进行转移。融合IT基础设施

10、资源池：为不同的业务负载选择匹配的计算架构和存储架构BSS-CRMCRM网上营业厅10000号BSS-计费联机采集Hotbilling在线计费OSS资源管理服务开通综合激活EDA数据集市ODS/EDWEDW离线分布式计算 - Hadoop流式计算架构 - storm传统B/S架构存储平台特性计算架构在线分布式计算 mysql sharding在线实时分析 - MPP计算架构应用负载FC-SAN专用资源池+ 高性能全闪存资源池通用存储资源池（1、2、3）专用存储资源池（1、2、3）基于X86硬件的、分布式的SDS存储资源池基于IP服务的大容量存储服务器资源池，如HDFS、Vertical对象存储

11、资源池IP-SAN存储资源池备份、归档区域统一云管理平台自服务门户流程管理资源管理资源监测资源调度交付的服务需要的服务。虚拟卷、实体卷的统一存储供给层（自动化、工作流、统一管理及部署）计算资源池、网络资源池。Agenda存储资源池建设需求、架构目标及难点分析存储资源池关键技术及适用性分析存储资源池架构建议存储资源池解决方案Q&AHPE融合存储方案：端到端的完整解决方案BSS-CRMCRM网上营业厅10000号BSS-计费联机采集Hotbilling在线计费OSS资源管理服务开通综合激活EDA数据集市ODS/EDWEDW离线分布式计算 - Hadoop流式计算架构 - storm传统B/S架构存

12、储平台特性计算架构在线分布式计算 mysql sharding在线实时分析 - MPP计算架构应用负载FC-SAN资源池全闪存资源池通用存储资源池（1、2、3）专用存储资源池（1、2、3）基于X86硬件的、分布式的SDS存储资源池基于IP服务的存储资源池对象存储资源池IP-SAN存储资源池备份、归档区域统一云管理平台自服务门户流程管理资源管理资源监测资源调度交付的服务需要的服务。虚拟卷、实体卷的统一存储供给层计算资源池、网络资源池。企业咨询实施服务Proliant服务器、Integrity服务器，Vertica 数据库，BigData集成式交付平台。StoreServ3PARStoreVirt

13、ualVSASwift分布式专用服务器Proliant 服务器StoreOnceVSADPAutonomyStorage Essential、OV、Vcenter、OO集成等Helion OpenStack云平台定制化云服务HP Storage Federation存储联邦已经实现了存储资源池的功能单一管理界面将负载部署在最佳资源上在数据中心角度建设部署维护STOREONCEDEDUPLICATIONStoreServ SAN资源池StoreOnce备份资源池RMC一键式备份，无需备份软件干预未来存储两个最关键的领域内部硬盘的分布式计算超融合全闪存阵列应用集成与融合软件定义系统定义HPE存储策

14、略超越存储，远见未来Open Converged Management to reduce OpExFederated data services for increased agilityConverged Infrastructure Solutions for time to valuePolymorphic Storage Architectures for SLA or Cost Optimization针对服务而优化的3PAR融合系统CS700/CS500(3PAR)超级融合CS200-HC StoreVirtual数据服务StoreOnce固定成本灵活SLA软件定义的StoreV

15、irtualVSA/4000 融合管理HP OneView3PAR: The broadest flash array family in the industry163PB12PB6PB15PB9PBPerformance*, IOPS3PAR 84503PAR 208503PAR 204503PAR 208003PAR 84403PAR8400Scalability, PB Usable3M2M1M03PAR 8200The most scalable and denseall-flash array on the marketIndustrys lowest cost all-flash

16、 array entry pointAll Flash Arrays Converged Flash Arrays *100% Random ReadHPE StoreVirtual: Software-Defined Storage LeaderFor VM-based or Converged Infrastructure-based deploymentsTurn any server into a virtual array with the StoreVirtual VSA4630StoreVirtual4TB VSAPerformance for SMB and ROBO4130,

17、 4330, VSA Efficient use of SSD for SMB4335Consolidate storage for performance and capacity4530, 4730When Value MattersStarting at $3KWhen Performance MattersSSD performance at a lower costWhen Scale MattersUp to 768TBStoreVirtual10TB VSAStoreVirtual50TB VSALeftHand OSHPE StoreOnce Portfolio (Dec 20

18、15)1TB, 4TB, 10TBand 50TB usable6500 5.5TB usableScalable up to 15.5 TB usableScalable up to 216TB usableVSA 3100 51004900Scalable up to 432TB usableScalable up to 1.7PB usable3540NewNewNew3520NewScalable up to 31.5 TB usableStoreOnce CatalystBackup App & Source DedupeHPE Data ProtectorHPE StoreOnce

19、 Recovery Manager Central (RMC)HPE Restricted for HPE and Channel Partner Internal Use OnlyExpress Protect for HPE 3PAR StoreServe.19StoreOnce Recovery Manager CentralRMC-VExpress ProtectMore AgilitySnapshot management, backup and recovery fromVMWare Vcenter via OneViewMore PerformanceRapid online r

20、ecovery of VMs and datastores with consistent, & non-disruptive array snapsMore Efficiency Reduce cost and complexity with Express Backup direct from space efficient 3PAR snaps to StoreOnceLess RiskReliable off-system backupand recovery of deduplicated backups with StoreOnceEnd-to-end availability a

21、nd protection for enterprise applications智能集中存储资源管理平台HP Storage Essential企业存储网络管理的痛点在哪里不断增长的企业管理复杂度-多厂商混合的环境致使相互依赖关系不清晰-无法快速准确的定位故障源-缺乏一目了然的整体存储使用情况数据海量增长&存储利用率不高-部分存储容量未被充分利用-大量不活动的数据导致关键业务的I/O低下什么是HP Storage Essentials-HP SE 是一个网络软件-是存储网络的管理软件SANLANHP Storage Essentials - 存储网络的管理软件1. 我的存储基础架构到底是什么

22、样?HP SE-EE 解决方案:HP Storage Essentials Enterprise Edition 管理服务器应用模块: Oracle, SQL Server, Sybase, Exchange, DB2, InformixHP SE-EE 用户得益:改善运营效率确保数据的可用性在购买存储硬件上有很大的自由度,并使之与业务和预算的需求相匹配2. 什么资源影响我的业务应用?- 自动化的发现- 借助统一视图的深度可见性, 提供报表以及存储网络全局拓扑- 存储配置 & 关联性- 单一控制台查看应用到存储的依赖可见性- 提高了操作效率CURRENT用于客户化分析的过滤器归好类的容量总结向

23、下钻取的分析视图按元素排列的容量总结可设置为默认登陆页面历史的容量利用率的趋势容量仪表盘：少量的点击即可获取重要的数据, 简单化的浏览, 共同的启动点3. 我在哪里更需要存储资源?-针对应用, 数据库, 服务器, 光纤交换机以及存储路径性能可视化的单一操作台-借助历史的性能分析分析以及基于路径的性能分析能够快速的寻找故障的瓶颈-保存 & 撤销定制化的性能分析工作台和相关模板, 为了更快的进行周期性的情况以及趋势分析Storage Essentials 性能管理器：基于路径的SAN性能利用率分析工作台26screenshot goes here4. 我的 IT 哪里的性能出现了问题?5. 我如何

24、向上级汇报存储的使用情况?-超过300个内置SE报表的模板, 并且可以定制-可定制全局报表能力-可导出为主流的格式-可定制时间表并且交付大量的开箱即用的报表27screenshot goes here-在许多主流的存储阵列上通过按部就班的屏幕步骤去管理池, 卷以及主机安全组-避免登陆本地设备管理工具去做日复一日的置备操作元素置备 存储28screenshot goes hereCURRENT6. 我能否统一完成存储容量供应?-SAN Zoning工具确保你从一个通用管理界面中针对多厂家的SAN交换机创建和修改zones, zone aliases和zone sets元素置备 交换机29scre

25、enshot goes here6. 我能否统一完成存储容量供应?HP 云平台自动化运维组件HP Business Service Management(BSM)监控、事件 & 告警HP Storage Essentials (SE)HP IT Service Management(ITSM)帮助台/ 变更请求HP uCMDBHP Operations Orchestration (OO)HP Network Automation (NA)HP Server Automation (SA)HP Database & Middleware AutomationHP Business Servic

26、e Automation (BSA) Essentials服务自动化观察器BSA Essentials 报表互通网络订阅服务Autonomic3PARGen-4 ASICFine- Grained为什么选择HP存储解决方案?Tier1 存储云存储大数据软件定义的存储凭借专业的知识和丰富的经验，降低您的风险存储咨询服务根据业务需求安排存储 加快实施降低部署风险实现购买存储的全部价值整体服务组合评估设计实施集成管理 按需容量融资备份、恢复和存档 (BURA)SAN优化横向扩展、对象和文件存储咨询服务集成运维管理平台端到端服务生命周期备用HPE存储专用型服务器介绍惠普面向计算时代的能力融合基础设施孤

27、立手动场内软件定义的数据中心云服务融合云软件定义 HP BladeSystem、 HP Apollo、 HP Virtual Connect、 HP Moonshot HP OneView、RESTful API支持、 ISV集成HP CloudSystem，OpenStack就绪 传统的计算基础设施 HP Helion惠普SDDC解决方案惠普融合系统通用模块化架构助力工作负载优化重新构思，专注计算更高的灵活性和IT基础设施的选择全球支持与服务 | 最佳的合作伙伴体系 | 融合解决方案通过融合加速 IT 服务交付面向虚拟化和云工作负载HP BladeSystemHP OneView通过可用性确

28、保实时运行面向核心关键业务环境HP ProLiant 纵向扩展产品HP IntegrityNonStopDragonHawkHP Integrity刀片服务器和 Superdome通过智能功能提高生产力面向企业级业务应用HP ProLiant MLHP ProLiant DLHP MicroServer借助极高密度和效率实现快速扩展面向大数据、高性能计算和 Web扩展HP服务器产品家族：为不同的工作负载提供针对性优化HP ProLiant SLHP MoonshotHP Apollo通用模块化计算架构大数据/冷存储应用场景对服务器的需求融合且平衡的架构单机相对够用的CPU资源单机足够的存储容量

29、和IO吞吐能力可靠性（集群内多节点故障仍然会导致集群宕机）TCO有限的空间供电限制下，提供更多的节点、更多的数据存储和处理能力系统级解决方案融合管理针对应用优化的设计4U机箱/1个节点每个节点：2个高性能根盘68 个8TB 7.2k SAS/SATA驱动器4GB RAID卡或SAS直通模式5个PCIE 3.0 IO扩展槽灵活应对任何数据中心的大数据工作负载HP ProLiant Apollo4500 Gen9 系列服务器Apollo4510 Gen9 Apollo4530 Gen9 4U机箱/3个节点每个节点：2个高性能根盘15 个8TB 7.2k SAS/SATA驱动器4GB RAID卡或S

30、AS直通模式5个PCIE 3.0 IO扩展槽提升分布式并行处理速度孤岛式架构密度提升50%计算能力增加50% 磁盘增加了87.5%功耗节约了15% HyperStorage服务器 传统2U机架式服务器单个机架的Hadoop worker节点20个节点240个核心240块数据磁盘（含系统磁盘）15千瓦40个NIC端口30个节点360个核心 450块数据磁盘+60块专用系统磁盘13千瓦60个NIC端口HPE Apolloo4530 3x15应用和工作负载对象存储和冷存储部署（4510）大容量存储/分析/邮件/数据库/Lustre/HPC（4530）1:1 内核/磁盘比率的 Hadoop 工作负载（

31、4530）针对存储密度、性能和特性而优化HPE Apollo 4500 Gen9 (2Socket/4U) 产品概述客户特征需要在 4U 外形中拥有超过 45 块 LFF 硬盘 (360 TB) 的拥有数据密集型工作负载的客户需要惠普最密集的、专门构建以支持大数据应用的可扩展存储硬件的客户 特性详细信息处理器最多 2 颗英特尔 Haswell EP E5-2600 v3，最高 135W，Wellsburg 芯片组内存16 个 DIMM（每处理器 8 个），寄存式，带 ECC 的 DDR4(1866/2133)硬盘支持每节点 60 块 LFF SAS(12Gb)/SATA(6Gb) 硬盘，有 1

32、 个节点 (1x60)，另加背部的 8 个 LFF 选件 每节点 23 块 LFF SAS(12Gb)/SATA(6Gb) 硬盘，有 2 个节点 (2x23)每节点 15 块 LFF SAS(12Gb)/SATA(6Gb) 硬盘，有 3 个节点背板 (3x15)包括转换器内的 SFF 硬盘支持 PMC Belmont SAS 扩展卡网络英特尔 Powerville 1GbE LAN 端口或 10GbE 双端口ALOM扩展最多 5 个矮版 PCIe Gen3 插槽CPU0：1 个 ALOM x8 LP x16 插槽（G3，25W），1 个智能阵列带 HBA x8 LP x16 插槽（G3，25W

33、），1 个智能阵列带 HBA x8 LP x16 插槽（G3，75W）CPU1：2 个 x8 LP x16 插槽（G3，75W）I/O前端：每节点 2 个外部 USB 端口，视频、电源/状态/UID 按钮和 LED 指示灯管理iLO4 + 1 个可选的专用 iLO 网卡端口其它特性4U 机箱高度，热插拔冗余风扇，冗余风扇，HP Gen9 Flex 插槽（交流电和直流电版本）HP Apollo 4500 Gen9 系统是一款专门构建的大数据存储服务器，针对大容量存储和数据分析应用进行了优化。新特性以蓝色文本表示利用 HPE ProLiant Gen9 服务器来实现您数据的潜能40每个 Apoll

34、o 4500 机箱可安装 1 台或 3 台服务器优化内核/磁盘比率使用 2 颗英特尔 至强 E5-2600 v3 处理器高性能内存 使用最多 16 个惠普智能内存 DIMM，最高速度和最高容量分别为 2133 MHz 和 1024GB单个节点可维护性 可轻松维护和更换组件顶视图（Apollo4530）HPE Apollo 4500 Gen9 系统 - Gen 9 的改进之处机箱缩小至 4U热插拔风扇移至内部。从顶部垂直热插拔。全新的超薄硬盘托架支持 12Gb SAS 硬盘顶视图（Apollo4510）Apollo 4530 Gen9 后视图HPE Apollo 4500 Gen 9 系统改进之

35、处 后端服务区5 个 PCI Express Gen 3 插槽4 个 全高/半深 x8 插槽1 个插入硬盘控制器的 x8 插槽Gen 9 电源可以选择交流电源或直流电源管理模块共享的 iLO 端口速度提升至 1Gb支持全新的增强型 SL-APMFlexLOM2 个 1Gb 嵌入式网卡Apollo4510Hadoop 分析Apollo 4530Apollo 4500 理想环境43低延迟对象存储三重复制数据 所有副本均存储在一个 Apollo 4530 系统内可支持最多 8TB 硬盘最多 45 块 LFF 硬盘 = 360TB 的最大存储容量高级 E5-2600v3 处理器（50-135W，1.5-2.8 GHz，最多 16 个内核）最高 1024GB DDR4 内存以支持快速内存分析最多 5 个 PCIe 插槽以支持 I/O 扩展，最高可扩展至 10GbE每个系统最多 68 块 LFF 硬盘以支持 544TB 的最大存储容量高级 E5-2600v3 处理器（50-135W，1.5-2