大数据存储管理大趋势isilon

1、大数据 存储管理大趋势The Digital Universe2010年数据1.2 ZETTABYTES1,200,000,000,000,000,000,0002020年将达到35 ZETTABYTES35,000,000,000,000,000,000,000大数据正在改变企业存储来源: IDC基于文件: 60.7% CAGR基于块: 21.8% CAGREXABYTES到2012年, 80%存储空间用于基于文件的数据大数据来源 文件，非结构化数据. “大数据”Video & GraphicsGenetic SequencingSatellite PhotosComputerModelin

2、gSeismic ExplorationMusic / AudioPDFsMedicalImaging纵向扩展技术不适合大数据扩展性性能管理可靠性成本SCALE upSCALE up存储网络服务器垂直扩展与横向存储性能容量峰值存储设备性能低峰值存储设备性能中峰值存储设备性能中高峰值存储设备性能高痛苦的系统迁移复杂的系统管理重复的系统投资如何满足大数据需求:无与伦比的容量和性能扩展性.存储大数据架构的转变横向扩展扩展性性能管理可靠性成本10 GbE网络10X性能SCALE outSCALE out集群计算&服务器虚拟化横向扩展存储架构StorageNetworkServer垂直存储与横向存储性能

3、容量单一系统线性扩展性能扩展适合快速增长单一文件系统单一系统管理灵活双向扩展海量数据存储传统存储与集群存储传统存储集群存储Faster.Slower.TRAIN STOPS!TRAIN KEEPS GOING!平衡性能和容量X200企业级特性数据保护强劲分析能力新EMC Isilon 横向扩展解决方案极速性能S200(可选第二个交换机)Isilon IQ存储层内部Infiniband万兆互联层服务器客户/应用层NFS, CIFS,FTP, HTTP(可选第二个交换机)标准千兆以太网层服务器服务器Isilon IQ网络架构向Isilon IQ集群写入一个文件（可选第二个交换机）（可选第二个交换机

4、）服务器NFS, CIFS,FTP, HTTP（可选第二个交换机）服务器服务器向Isilon IQ集群写入一个文件(可选第二个交换机)WorkVert-Specific向Isilon IQ集群写入一个文件(可选第二个交换机)服务器NFS, CIFS,FTP, HTTP(optional 2nd switch)服务器服务器(可选第二个交换机)从Isilon IQ集群读取一个文件从Isilon IQ集群读取一个文件(optional 2nd switch)服务器NFS, CIFS,FTP, HTTP(可选第二个交换机)服务器服务器最大的可扩展文件系统传统文件系统100倍的扩展性OneFS 单个文件

5、系统可从18TB扩展到15.5PB60秒完成扩展，无停机无需修改客户端设定世界最快的扩展速度AutoBalance: 节点间自动数据均衡减少了存储扩容的成本、复杂程度和风险最大的可扩展文件系统AutoBalance可以在线将生产环境中的数据均衡到新的存储节点不需要手动参与，不需要重新配置，不需要修改服务器或客户端的挂载点以及应用程序配置空空空空空满满满满均衡均衡均衡均衡均衡最可靠的存储系统(可选第二个交换机)高可用集群架构使用N+1保护时，如果单个驱动器或者节点不可用，数据100%可用Isilon提供业界最快的驱动器重建时间一小时之内！当使用N+2, N+3, 和N+4保护级别时, 数据在多个

6、磁盘或者节点不可用时仍然100%可用100% 可用性故障100% 可用性100% 可用性100% 可用性100% 可用性100% 可用性100% 可用性100% 可用性故障具有最高可用性的存储虚拟热备能够使用集群全部剩余空间重建数据不像传统系统受限于卷和RAID的重建X失效 SMARTPOOL I/O POLICY PROTECTION POLICY Globally Coherent Cache VDMK DataLatency Globally Coherent Cache大数据单一文件系统保护级别灵活和数据自动分层S200 Random +1 X200 Sequential +2 NL

7、Inherited +4HPC DataI/OpsFile DataMB/sArchive Select Select SelectS200-SSDS200-SASX200NLI/OsThroughputArchiveRandomSequential Inherited+1 +2+3+42xS200-SSDRandom2xFile DataMB/sFile DataMB/sFile DataMB/sSmartConnect高级版配置IP地址池地址会被指定的网络接口使用 ifs SmartConnect Zone（区域）名称是客户端要访问的全名可以在4种连接均衡策略中选择Round Robin（

8、轮流）CPU Utilization（CPU使用率）Connection Counting（连接数）Aggregate Throughput（吞吐量）地址池必须制定SmartConnect服务子网，子网上也必须配置SmartConnect服务IPOneFS 6.5 操作系统增强企业级的访问和安全增强验证支持 CIFS 协议支持 NFS 4.0 协议Kerberized NFSv3 supportSmartQuotas概览SmartQuotas是授权的软件模块可以让管理员在存储利用方面有更大的控制力配额可以针对用户，组或者目录/文件夹强制型和记账型配额都支持根据配额的类型，支持多种提示方法Isi

9、lon SnapShotIQ概览可以与备份解决方案整合当创建point-in-time型快照时效果更好可以与Microsoft Shadow Copy Service整合支持新版本的Microsoft操作系统快照中只保存变更的数据块SnapshotIQ使用Point-in-Time (PIT) 和Copy-on-Write (COW) 方式来生成快照大多数快照都是使用其中一种方式生成的OneFS会根据写入操作的不同动态选择生成快照的方式PIT用于大型持续写入操作COW用于小文件改变SyncIQ概览SyncIQ是异步文件复制模块需要购买的授权模块从Isilon集群复制数据到其他Isilon集群参

10、与集群的大小和型号不必相同通过任何IP链路复制WAN（广域网）或者LAN（局域网）SyncIQ 3.0复制数据块，而不是新的/修改过的文件。SmartLock经济高效地防范意外、过早或恶意地删除或修改数据InsightIQ 1.5业界领先的横向扩展综合分析扩展节点平台节点大数据横向扩展存储解决方案S-SERIESX-SERIESNL-SERIESACCELERATORAND BACKUPACCELERATORISILON EX NODES硬件应用软件操作系统Isilon 特性业界证明的云存储解决方案领先者，国内外最大容量的集群存储系统，APPLE（12PB），华大基因（4PB）,金山软件（2.8PB）。单一分布式文件系统，最大可扩展到15.5PB全局单一命名空间访问仅由模块化