云存储解决方案成功案例与经验分享

漫步云端尽享轻松存储

IBMXIV&SoNAS–云存储的双重基石

世界每天都在变得越来越智慧

是什么让它越来越智慧?答案是越来越多的信息!2000200520102015需要控制存储容量的增长存储需求的增长超过了预算的增长预算数据控制您的开销

立刻采取措施，也许还能控制住成本信息爆炸与预算的匹配情况TBPBEBZBGB越来越复杂的IT环境……厂商C厂商B厂商A驱动A驱动A驱动B驱动B驱动C远程镜像?能否跨存储服务器实施拷贝服务?需要有几套存储管理接口?没空间了没空间了没空间了空余空间数据迁移SAN管理控制台A管理控制台C管理控制台B快照?存储的利用率高吗?数据迁移造成的停机时间是否很多?WindowsServersLinuxServersUNIXServersIslandsofcomputinganddataDisparatemanagementtoolsManualProvisioningManagement

ServersPhysicalConsolidationComplexityLogicalVirtualizationWindowsServerUNIX®ServerLinuxServerNetworkingNetworkingFewerdevicesandlicensesDisparatemanagementtoolsLaborintenseprovisioningPoolsofresourcesVirtualizedserversQuickprovisioningAutomatedmanagementStorageVirtualizationVirtualServers,Storage,NetworksStorageServers让高效云存储来帮您解决问题Networking云计算的核心要素BusinessandITWorkloads=

成本虚拟化+标准化自动化+SLA随处访问

随时在线

自动按需扩展

用户自我服务2024/5/257云计算

智慧的服务提供方式2024/5/258什么是云存储?2024/5/259云存储的特点IBM云存储为用户带来的价值简化了IT管理工作提高了IT管理的效率节约了成本，保护环境排放热量减少60%以上空间占用减少80%灾难恢复时间减少85%快速满足业务需求能够监控存储资源，并根据已定义的规则自动地平衡资源的分配。动态性存储资源的物理位置及底层的基础架构对于用户来说是透明和不相关的虚拟性可以将复杂的工作负载分解成小块的工作，并将工作分配到可逐渐扩展的架构中。扩展性基于服务为导向的架构，动态地分配和部署共享的存储资源。有效性灵活性可以支持多种计算机应用类型，且同时支持消费者应用和商业应用。2024/5/2510存储云与传统存储平台的区别块存储云文件存储云块存储用户文件存储用户LUN,iSCSILUNTargetsPOSIX(NFS,CIFS,WebDAV),快速为用户部署存储空间按实际用量计费降低存储成本(存储共享，重复数据删除，数据压缩)系统管理简单弹性扩展11IBM云存储解决方案BlockStorageFileStorageDataServices网格块存储虚拟化块存储集群文件存储备份云存储归档云存储块信息云存储提供块设备存储服务，适用对性能、可靠性有一定要求的数据库应用弹性扩展，不影响业务的运行存储的物理结构对用户透明易于管理按需供给存储容量文件信息云存储提供文件存储服务海量、弹性扩展，支持PB级数据和数十亿个文件存储的物理结构对用户透明全局命名空间内置数据存放策略和信息生命周期管理高性能和高可用性数据服务云存储数据保护数据安全及合规更安全更可靠!安全的存储和保护业务信息更快更持续应对整合的多种业务更简单易用让信息人员专注于业务性价比更高更低的运维成本扩展和变更容易迁移/整合/升级简单,平滑SVCXIVSoNAS企业级存储云对存储的要求14IBM存储家族自动存储分级存储存储虚拟化服务-SVC备份，恢复和去重服务系统在线和离线备份集中和异构存储管理系统-TPC共享文件服务SAN/IPDS8000DS5000DS3000XIVIBMIBM磁带TivoliStorageManagerProtecTIERTivoliProductivityCenterSANVolumeControllerOthersHDSHPEMC非IBM存储IBM磁盘IBM磁带非IBMTivoliStorageManagerProtecTIERTivoliProductivityCenterV7000SVC:网络级存储虚拟化中心16SVC协助建立了一个十分灵活的虚拟存储架构StoragePoolSANHDSIBMVirtual

DiskVirtual

DiskVirtual

DiskVirtual

DiskSANVolumeControllerSUN

HPEMC把不同存储阵列的存储容量组成一个统一的存储池AdvancedCopyServices在存储池上应用统一的拷贝服务功能通过中心控制点进行集中管理存储设备发生改变时，主机应用不会被迫中断XIV:块级网格云存储自我管理自我优化自我恢复包含全部企业功能降低总体拥有成本数据模块UPSUPSUPS数据模块数据模块数据模块主机主机FC内部交换机iSCSI主机2024/5/2519块存储云–XIV网格虚拟存储所有特性全部均可线性扩展2024/5/25205点要素,完全适应块级存储云2024/5/2521XIV–数据分布算法VMwareERPOracle分布算法每个volume均跨越全部磁盘转轴;数据被”分成”1MB“分区”以网格的方式存储在磁盘上;XIV以”伪随机”的算法自动将”分区”分布到

所有

的磁盘上;优点无需调优;没有热点;恒定100%负载均衡;恒定100%磁盘利用率2024/5/2522XIV-存储扩展VMwareERPOracle模块被添加数据自动重新分布分布过程不影响性能无需人工干预无需调优无需重新规划2024/5/2523XIV–存储扩展(2)VMwareERPOracleExchange新增数据和Volume被分布到整个网格架构中新增和现存的volume共享相同网格的资源无需人工干预2024/5/2524XIV-存储弹性数据会存储在网格内现有的组件中重建期间对性能影响极小“自我优化”重建过程由全体驱动器参与DataModule2DataModule3DataModule4DataModule1[硬件故障!]…发生在网格中的全部组件上传统架构复杂,不主动随容量增长,全手工调整需要更多的预先规划对现有的生产系统的风险更高需要更多的监控和调整较低的容量利用率XIV完全自动化无需预先规划自动负载均衡最优的容量利用率2024/5/2525性能–存储管理全部免费!2024/5/2526XIV:内置企业级存储管理软件高性能快照提供:

更简便的物理磁带备份从逻辑备份即时恢复轻松创建开发测试环境易于回滚的Boot-from-SAN环境更易于完成基于生产数据上的数据挖掘DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1在虚拟服务器环境中快速增加/部署虚拟机在存储系统中快速为虚拟机分配存储空间存储系统自动为虚拟机优化性能,消除热点WINZ-LINAIXZ-LINAIXWINVMwareP-SeriesZ-Series优化虚拟化环境:P-Series,VMware,Z-Series&XIV

2024/5/2528XIV:管理极其简单2024/5/2529XIV带来的TCO节省:管理成本

管理投入↓50%

硬件投入↓20%

软件投入↓30%

设施投入↓25%

2009ITG(InternationalTechnologyGroup)报告XIV传统高端存储2024/5/2530总结可靠的高性能简单易用灵活低TCO发射后不管!平均超过50%的SLA提升以及超过60%的TCO节省!2024/5/2531是什么原因使1,000个客户放心的在4,000+XIV上运行关键业务?SoNAS:无限扩展的文件级云存储33集群文件存储

——IBMSONAS：为云时代准备的存储CIFS客户端HTTP客户端FTP客户端NFS客户端管理节点接入节点......IP网络磁带库接入节点StoragePodStoragePodSCP客户端....接入节点单一文件名空间存储节点存储节点存储节点存储节点Infiniband数据网络IP管理网络磁盘阵列磁盘阵列磁盘阵列磁盘阵列一级存储：高速盘阵二级存储：大容量盘阵三级存储：磁带库SONAS简单:只有3个基本组件接口节点–多快存储节点–多大管理节点

所有节点都是集群方式的高可用模式

外部用户通过IP方式接入

所有节点的内部互联通过高带宽、低延时的私有Infiniband网络并行网格架构

优秀的线性扩展性

高性能

高可用和冗余SONAS系统软件在所有节点上运行

策略性的自动化

全局文件系统

图形化管理界面及操作系统34SONASSoftware

EnhancedInterfacesSystemsSoftwareStandardcomponentsCIFSParallelFileSystemCentralPolicyEngineBaseoperatingsystem(EnterpriseLinux)IBMServers(x3650M2)MonitoringAgentsNFSFTPHTTPClusterManagerGUI/CLImgmtinterfacesFutureSecurityHSMandILMBackup&RestoreSnapshots,Replication35IBMScaleOutNAS

…被实施以后:

全局虚拟文件存储器协议CIFSNFSHTTPFTPSCP

管理CentralAdministrationMonitoringFileMgmt可用性DataMigrationReplicationBackup

Globalnamespace在不同层的存储池间自动移动自动切换的集群自动分层存储高速文件扫描引擎分层存储重复数据删除的VTL或磁带库高性能PB级文件扫描和搜索终端用户高端工作站应用服务器数据库SONASGlobalVirtualFileServerSONAS系统结构36TSMnodeInterfaceNodeInterfaceNode

CustomerIPNetworkWindows用户UNIX用户InfiniBandClusterNetworkPrivateEthernetManagementNetworkManagementNodeInterfaceNodeTSMnodeStorageNodeStorageNodeHighDensityRAIDControllerStoragePodOneortwohighdensity4Ux60HDDRAIDControllersOnehighdensity4Ux60HDDstorageexpansionunitperRAIDcontrollerUpto30StoragePodsSONAS系统Upto30InterfacenodesInfiniBandClusterNetworkOptional:1stDiskExpansionuniton1stRAIDControllerHighDensityDiskEnclosureOptional:2ndRAIDControllerHighDensityRAIDControllerHighDensityDiskEnclosureOptional:Optional1stDiskExpansionuniton2ndRAIDControllerInterfaceNodeInterfaceNodeInterfaceNodeStoragePodTape37………>

…..….....scaleoutscaleout/home/appl/data/web/important_big_spreadsheet.xls/home/appl/data/web/big_architecture_drawing.ppt/home/appl/data/web/unstructured_big_video.mpg/home/appl/data/web/home/appl/data/web/important_big_spreadsheet.xls/home/appl/data/web/big_architecture_drawing.ppt/home/appl/data/web/unstructured_big_video.mpgIBMScaleOutNASPolicyEngineGlobalNamespace注意:

上示例中三个文件都在同一个文件系统目录中，但根据业务需求和数据特点分别被分配到不同的后端存储池中。数据在后端存储设备间实现全局条带化。—高性能—自动调优—自动负载均衡Tier1:SASdrivesTier2:1TBSATAdrivesTier3:2TBSATAdrivesInterfacenodesInterfacenodesInterfacenodesStoragenodesStoragenodes>Storagenodes逻辑视图物理视图l文件存储虚拟化——IBMSoNAS工作模式38IBMScaleOutNAS2024/5/25全集成的系统超级可括展网络连接存储系统(NAS)，包含一系列业界领先的软件功能NFS,CIFS,FTP,HTTPandSCP网络协议聚合各项高性能硬件，超越传统文件存储器.全局文件名字空间（Globalfilesystemnamespace）同步和异步的远程复制文件数据文件系统快照和定额控制可括的，集成的数据生命周期管理(ILM)自动分层存储AutomatictieredstorageHSM支持到外部TivoliStorageManager(TSM)服务器实时性能监控集成的系统硬件总监控（SystemHealthCenter）LDAP和WindowsActiveDirectory支持1GbE和10GbE外部端口内部采用高速、超低延时的Infiniband集群网络作为核心数据交换系统(20Gbit/sec)高密度RAID控制器和磁盘扩展柜(4Ux60HDD’s)支持高速SAS和高容量SATA磁盘，很快将要支持SSDPrimaryRack42GbESwitch#241GbESwitch#1403938373636-portIB3536-portIB#1343332313029282726252423221UBlankFillerPanel21Keyboard,Video,Mouse2019181716151413121110987654321ManagementNode#1iPDUiPDUManagementNode#2InterfaceNode#6InterfaceNode#5InterfaceNode#4Storagenode#2Storagenode#1iPDUStorageController#2.1DiskStorageExpansionUnit#1.2StorageController#1.1iPDUDiskStorageExpansionUnit#2.2InterfaceNode#3InterfaceNode#2InterfaceNode#139适合使用SONAS云存储的环境数字媒体高性能、海量存储能力、极高的扩展性、随处访问等特点适合于媒体行业对性能、容量及变化多端的环境网络内容存储海量存储能力及自动分级能力特别适合存储Web内容高性能计算和分析系统性能好，扩展能力强，并行共享适合于需要高性能计算的用户协同工作及文件存储海量存储、自动分级、高扩展能力以及随处访问、随时在线的特点适合于大型企业和文件数量众多的场景能源地理科学能源探索和地理科学要求大量可访问的命名空间作分析之用和非常高的性能汽车、飞机设计及数字模拟分析可高速处理、编排海量原始数据，在授权范围内共享数据40IBMTivoliStorageProductivityCenter控制中心

——存储云的统一管理平台TPC所提供的管理特征:从单个用户界面管理整个数据中心配置,计划,实施,指导配置变更管理跟踪资产,容量,利用&会计报表趋势&性能分析告警&问题隔离复制管理支持广泛的平台TPCStorageServerSAN2024/5/2541存储云的框架物理设备层设备管理层数据管理层服务接入层高可用性数据在线迁移数据备份数据归档数据合规重复数据删除内容管理专用APINFSCIFSLUN/iSCSILUNWebDAV数据安全信息挖掘存储资源部署存储云用户Tier-1DiskTier-2DiskTier-3DiskSANSwitchTape块存储云