南充商行技术文件 NetApp

PAGE69PAGE南充市商业银行技术文件

第一部分NetApp公司简介

创新是我们的DNA帮助客户成功是我们的文化我们是云计算、大数据的领导者我们的FAS统一存储全球销量第一我们是《财富》“全球最佳跨国公司”第三我们是NetApp我们发明了统一存储我们引领了存储发展潮流NetApp公司介绍NetApp是全球领先的存储与数据管理厂商，由DaveHitz和JamesLau(刘冠新)于1992年在美国加州阳光谷(Sunnyvale)创立。经过二十多年的发展，今天的NetApp已经是一家拥有13000名员工，年营业额达到63亿美金的跨国公司。虽然是一家年轻的公司，但在截止到2013年全球外部存储系统市场占有率上，NetApp公司已经稳居第二的市场地位。从创立之初，NetApp就确立了两大宗旨，也是我们赖以成功的企业文化。首先是“帮助客户成功”。NetApp重视每一个客户，而且提出“GoBeyond”的原则，即不仅仅只是做好自己分内的事，要进一步、更深入地为客户服务。例如，在项目中，我们不但会做好存储设计、规划和实施，也会对基础架构、应用部署提出最佳实践的建议，使整个系统成为更加协调的有机体。其次是创新。从成立以来，NetApp就不断地进行技术创新，引领着世界存储技术的发展方向。NetApp认为，优秀的存储是业务系统更加可靠的基石，更快运行的推进剂，业务整合的黏合剂，降低成本提升效率的魔术棒。拿设计汽车类比，过去传统存储厂家只是一代又一代地扩大气缸尺寸，提升马力，虽然载货量和性能提升了，但油耗也上去了，同时驾驶人员得到的只是一辆更难开的车。而NetApp一方面通过高效技术，减小气缸尺寸、降低油耗，同时还提升了动力；另一方面，NetApp丰富了很多安全、人性化方面的功能，驾驶人员开起来更加轻松、更安全，也获得了更好的驾驶体验。这是一个典型的“双赢”：在数据急剧膨胀、应用日趋复杂、业务要求越来越高的今天，NetApp的技术创新则帮助客户降本增效：节省成本开支，提升运行效率；反过来，客户也帮助NetApp获得了成功。根据IDC统计，NetAppFAS系列是全球销量第一的单一存储系统。业界荣誉近年来NetApp获得的业界荣誉包括：连续11年取得《财富》杂志“全美最佳公司”前十，其中2009年击败Google获得第一。2013年《财富》杂志“全球最佳跨国公司”第三连续6年在Gartner中高端SAN和NAS存储魔力象限中，获得“领导者”评价。微软“最佳存储解决方案”、“最佳私有云解决方案”大奖DCIG2013年“最佳统一存储”、“最佳云存储”评比，囊括前三存储标准化组织SNIA成立的云存储标准化小组中，6个领导席位，NetApp占据3席IDC99.999%可用性认证连续4年获得美国《存储》最佳企业级存储大奖NetApp的技术优势及在中国地区案例这两年来，大数据行业的应用有以下发展：一是数据量越来越大，数据类型也呈多样化。由于大数据和云技术的应用发展，各行业的沉淀数据量呈几何级增长。我们估计，在不久的将来，很多行业的数据量将达到PB级别。同时，非结构数据和结构化数据在各应用中将并存，而且数据增长方向主要在非结构化数据。如何管理海量的数据，对传统存储来说，是巨大的挑战。二是应用要求越来越高。这既体现在应用对“不中断运行”的要求上，同时也对应用系统性能的需求。两者其实可以归为一个目的，保证应用正常运行，减少宕机时间。三是应用种类越来越多，对管理维护也提出更高要求。新需求不断地提出，也会产生新的应用。那么对于存储系统最大的挑战是，如何满足新应用需求的同时，降低管理维护的复杂度。四是突破不同系统、不同行业、不同地域之间的信息壁垒，实现充分的信息资源共享、互备。利用传统的存储技术，要实现以上目标，必须付出很大的代价。而NetApp的创新技术可以帮助用户轻松实现，而且这些技术全部“统一”到一个平台上了：统一存储NetApp发明了统一存储，它可以同时整合不同类型的数据，统一管理。同时，单套NetAppFAS存储可以管理超过50PB的数据量，轻松应对新的业务带来的海量数据––这正是我们擅长的。弹性扩展从较小的型号起步，后期也可以灵活地对性能和容量进行扩展和升级，没有数据迁移的阵痛，而且可以保护原有投资。业务连续性NetApp存储内置了丰富的数据保护措施，足以应对各类故障。如“双活”、容灾、秒级快照备份、D2D备份…这些功能全部内置于存储本身，不需要额外购买软件。高效率存储技术，应对海量数据针对日益膨胀的数据量，NetApp免费提供了压缩、消重等技术，可以大幅降低磁盘购买量。NetApp还提供性能加速技术，各项性能测试表明，相同硬件配置下，NetApp可以提供最好的性能，保证核心业务的最低延时目标。面向虚拟化、云计算的共享式架构NetApp最初设计就是按照共享式的IT架构来做的。共享式架构，也是虚拟化和云计算的基础。不但可以打破应用、地域之间的信息壁垒，同时还可以提升硬件资源利用率，降低维护复杂度。更重要的是，面对新的应用需求时，可以做出更快的反应和调整。NetApp在中国金融行业的部分成功案例NETAPP在金融行业部分成功案例客户名称产品型号及台数应用SnapMirror灾备距离是否为MetroClusterSAN/NAS中国银行FAS6040A*2CallCenterY同城NSAN/NASFAS3240A*2分行级核心应用Y同机房NNAS中国建设银行总行数据中心FAS6280AMC*1数据交换平台N同城YNASFAS6280*42+FAS3200*6虚拟化云平台+非结构化数据云平台N

同机房YFCSAN+NAS招商银行总行数据中心FAS3040A*2邮件系统Y深圳-南京NFCSANFAS3040A*2DB2/MSSQL数据库,通用系统Y深圳-南京NFCSANFAS3040A*2网银日志Y深圳-南京NNAS招商银行总行数据中心FAS6040AMC*2VMwareY深圳-南京YFCSANFAS3040AMC*1VMwareN同城YFCSANFAS6240AMC*1招商银行信用卡中心FAS6240AMC*1WindowsSQL，一卡通网关，第三方支持平台N同机房YFCSAN深圳发展银行总行（现平安银行）FAS3240AMC*1VMware/OAN同机房YiSCSI/NASFAS3240AMC*1ODS应用系统，IBM小机＋OracleN同机房YFCSANFAS3240AMC*1Oracle报表系统N同机房YFCSANIBMAIX+OracleRAC内蒙古银行FAS3140*1，FAS3040*2核心系统，两地三中心Y两地三中心NFCSAN乌鲁木齐商行FAS6220（V）*2前置整合，储蓄，国债，支票影像，OA，城商联盟，黄金系统，信贷，基金，银联，VM虚拟化Y同城（10KM）NFCSAN四川省农村信用社FAS2040*16后督系统N无NNAS成都银行FAS6240*1，FAS3220*5流程银行Y同城NFCSAN南充银行FAS6220*1流程银行，数据仓库N无NFCSAN/NAS上海农商银行FAS6240*2虚拟化平台部署及容灾Y同城YFCSAN/NAS曲靖商行FAS3240MC*2核心业务系统Y同机房+曲靖/昆明双中心YFC浦发银行信用卡中心FAS3040*2文件服务Y同城NFC浦发银行数据中心FAS3020*2文件服务Y同城NNAS交通银行数据中心FAS6240AMC*1VMwareN同机房YFCSAN交通银行数据中心FAS6030A*2VMwareY同城NNAS文件服务民生银行外汇交易中心FAS6280AMC*1SAPN同城YNASFAS3270AMC*1VMwareN同机房YFCSAN柳州银行1xFAS3020C银行核心，OracleRACY200公里NFCSAN2xFAS270C1xFAS2040A桂林银行1xFAS3160A银行核心，OracleRACY同城NFCSAN1xV3140A南海农信FAS3140/FAS2050VMwareY同城NFCSAN/NAS影像/日志恒生银行FAS2040*2文件服务Y同城NNAS汇丰银行FAS3240*2文件服务Y同城NNAS瑞穗银行FAS3140*2文件服务Y同城NNAS存储虚拟化光大银行FAS3140/FAS2040备份Y北京-上海NNAS中登北京FAS3270A*2文件存储/服务器虚拟化Y同城/北京-上海NSAN/NAS中登上海FAS3170A*2桌面虚拟化Y同城/上海-北京NSAN/NAS/iSCSIOA服务器虚拟化报文上海证券交易所FAS3210*4文件服务Y同城NNAS信诚基金FAS3210*2核心应用Y上海-北京NSAN/NAS安诚保险FAS3250*1（MC），FAS2240*2全部核心应用+虚拟化Y两地三中心（重庆-北京）YFCSAN、NAS太平洋保险FAS3210A*2文件服务Y同城NNAS太平洋保险FAS3160AMC*1VMwareN同机房YNASNetApp在中国电力行业的部分成功案例NETAPP在电力行业部分成功案例客户名称应用产品型号及台数国家电网集团总部集中存储项目R2001套国家电网集团总部信通公司邮件系统FAS3140A系统2套安徽省电力公司集中存储项目一期FAS3050A2套安徽省电力公司集中存储项目二期FAS3020A20套安徽省电力公司营销系统存储及容灾备份FAS3140A2套四川省电力公司营销系统存储及容灾备份FAS3140A1套四川省电力公司集中存储项目一期FAS3020A1套四川省电力公司集中存储项目二期FAS3020A1套江苏省电力公司集中存储项目FAS3050A13套（IBMN5300OEM)江苏省电力公司集中存储项目R2002套浙江省电力公司营销系统FAS31401套浙江省电力公司集中存储项目FAS3040A1套湖北省电力公司湖北电力邮件系统存储项目FAS3040A1套湖南株洲市电力公司湖南株洲市电力公司营销系统项目FAS3040A1套湖南衡阳市电力公司湖南衡阳市电力公司营销系统存储项目FAS3040A1套南方电网海南分公司集中存储项目FAS31701套南方电网海南分公司营销系统存储及容灾备份1*FAS3160A、1*V3140A第二部分配置清单

双活存储平台配置清单数量：2套双活存储为两套完全相同的配置，对称部署，可以部署在同机房不同机柜、同一大楼不同机房，或者最远至相距200KM的两个机房。每套描述如下：项目部件名称配置说明数量企业级SAN存储（统一存储)平台FAS8040主控制器统一集群存储架构，最大可支持8个SAN控制器；配置双活双控，64GB高速缓存，1TBFlashCache二级缓存；8个16GbFC端口，4个万兆端口；1存储协议配置FCP、NFS协议1SSD盘200GBSSD8性能硬盘10KRPM600GBSAS硬盘60高级功能标配RAID-DP功能，提供高可靠、高性能的磁盘保护1标配SnapShot数据保护套件，实现存储数据的快速备份1标配FlexVol自动精简调用软件，支持动态卷扩展和缩减，增强虚拟存储池功能1标配MetroCluster和SyncMirror双活镜像功能1标配SVM存储虚拟机，每个虚机即为一个独立管理的存储系统，实现应用的安全隔离和独立管理1标配FlexShare存储性能优化软件，可根据应用优先级实现不同应用级别的存储性能管理和动态调整1标配SystemManager企业级存储管理套件，实现存储系统硬件以及软件功能的统一管理和监控，支持中文界面1配置OracleEnterpriseManager管理插件，允许DBA对存储进行性能分析和故障监控1双活架构配件专用双活光通信设备2其他原厂机柜1售后服务专业设计和实施服务3年原厂7*24小时硬件和软件售后服务1第三部分存储系统建议方案

目录第1章概述和方案亮点 17第2章需求分析和设计思路 242.1需求分析 242.1.1当前系统现状 242.1.2同城容灾系统的挑战 242.2建设目标和设计思路 262.2.1主备数据中心升级为双活数据中心 272.2.2利用先进数据保护技术，全面提升逻辑故障防范能力 292.2.3异地容灾系统升级为应用级 312.2.4“两地三中心”建设目标小结 312.2.5整合服务器虚拟化 32第3章设计方案 333.1方案总体描述 333.2第一阶段，建立双活数据中心 343.2.1可行性分析 343.2.2风险和影响分析 373.2.3双活建设方案 383.3第二阶段，完善异地容灾，实现完整的“两地三中心”架构 413.3.1容灾验证和演练 423.4第三阶段，完善数据保护机制 433.4.1逻辑故障防范–秒级备份和恢复 443.4.2D2D备份设计规划 453.4.3优化管理 473.5第四阶段，建立高效的研发测试机制 48第4章整合服务器虚拟化 494.1虚拟化环境中的性能提速技术 504.2虚拟化环境中的数据保护和灾备 524.3NetAppFAS和VMware的深度集成 534.4内置消重功能，降本增效 56概述和方案亮点随着金融改革的逐步深化，对城市商业银行而言，挑战和机遇并存。例如，根据麦肯锡刚刚完成的一项调查，四大国有银行在快速发展的零售银行业务上损失大量市场份额，储户加速流失。调查显示，客户青睐更加精细化的金融产品和方便快捷的电子银行，是他们选择其他中小型银行的重要原因。一方面，客户非常注重“安全感”，另一方面，客户也喜欢创新的金融服务所带来的收益、灵活和便利。无疑，金融创新是城市商业银行保持活力、加速增长的根本，是在竞争中取得优势的法宝。而信息化部门不但是银行业务正常开展的保障，更是金融创新、推动业务发展的催化剂。因此，我们认为银行数据中心基础架构的建设要点，体现在以下三个方面：增强风险防范能力，保障业务连续运行加速新产品上市进程，推动金融创新提供快速灵活的IT服务和响应，降本增效作为银行最核心的数字资产的承载和管理平台，存储系统的重要性不言而喻。NetApp是业界领先的存储厂家，在金融行业拥有广泛的应用基础，与大部分全球性银行、国有银行和区域性中小银行都建立了长期的合作伙伴关系，共同成长，并取得了丰富的设计建设和运维管理经验。针对南充市商业银行的应用、系统现状和发展愿景，我们还特别参考和借鉴了几家城市商业银行的建设经验，都已体现在本方案中，目的在于避免“摸着石头过河”：有清晰的演进发展路线，分阶段实施，规避建设风险，合理化投资。综合来讲，NetApp为南充市商业银行定制的方案有以下特点和优势：大幅提升可靠性和故障防范能力，为业务连续性运行提供保障存储平台采用业界销量第一的FAS系列企业级集群式统一存储系统，是可靠性的保证。经IDC对NetApp用户的长期跟踪和验证，FAS8000系列实际使用中达到99.9999%（6个9可用性，IDC2014年9月报告）可用性，领先于业界大部分存储产品（5个9）。FAS8000可灵活配置，从最小规模入手，可随需扩展到24个控制器，70PB容量和400万IOPS的强大数据管理和处理能力。成熟“两地三中心”解决方案：同城双活，异地容灾两地三中心一般为同城双中心+异地容灾中心。同城双中心采用“双活数据中心”方案，不但故障恢复速度（可做到RTO=0）上大幅优于现有的同城容灾方案，而且在数据中心之间可平衡负载，优化资源利用率。实现“双活数据中心”一般有两种思路：基于软件复制，或者基于存储设备。基于软件复制：可采用数据库的双活/容灾技术，可实现很好的效果，但应用面窄，对其他品牌数据库或者其他数据（如文件和虚拟化平台数据）无能为力。基于存储设备：部分厂家采用专门的双活设备，可满足不同数据库的要求。但功能单一，不具备容灾、备份等功能，因此必须组合多种平台（如远程复制平台、备份平台或CDP平台）来实现以上功能，大大增加了系统复杂度和排错难度。同时，它也不具备NAS双活功能。NetAppFAS8000内置双活功能，也属于基于存储设备的解决方案。FAS8000支持不同数据库和应用的双活，也可同时提供SAN和NAS的双活，技术先进，且全球拥有11000个以上的案例（基于存储双活技术中案例最多），成熟度高。FAS8000同时还具备容灾、备份等功能。双活、容灾、备份等功能实际上具有很大关联度，统一到一个平台下管理，不但简化整个系统架构，也减少很多不必要的系统开销，提升了整体系统的运行效率。NetAppFAS8000双活解决方案，已经通过了南充商行严密而详尽的系统化测试。多重数据保护，快速数据恢复能力双活和容灾对物理故障防范能力好，但不能防范逻辑故障。NetAppFAS8000内置秒级快照备份和恢复功能，以及磁盘到磁盘的备份功能。出现严重数据损坏时，可迅速调用快照备份和日志，将应用数据恢复到故障前。重要的是，NetApp提供的多重数据保护不会影响生产，也不会增加管理复杂度。NetApp这种秒级备份和恢复能力也可应用于批前备份和批处理失败后的恢复。批前仅需要1秒备份数据，批处理异常，可以在一分钟内恢复到批前数据，重新进行检查和处理。这样也优化了批处理的异常处理流程。另一种思路是采用CDP技术保护数据，可恢复到任一时间点。但CDP产品对生产性能有一定影响，而且不能做到应用一致性的保护（只能做到Crash-Consistency级别），恢复时间较长。同时，CDP是一个独立的平台，增加了管理的复杂度。预计项目实施完成后，可实现的业务连续性量化指标如下：情景解决方案业务系统运行情况单一组件故障全冗余系统架构零影响单一生产存储故障双活数据中心RPO=RTO=0，零影响数据中心瘫痪双活数据中心RPO=RTO=0，零影响生产数据逻辑故障快照结合日志恢复RPO~0（恢复到出现故障前）RTO<30分钟区域性灾难异地灾备系统RPO<5分钟极大优化新应用的研发测试流程，加速新应用上市进程NetApp具有独到的技术，可以大幅缩短新应用的开发测试周期。在研发和测试阶段，经常需要快速准备多个数据副本，实现研发和测试的并行化。一般存储厂家面对这个要求，往往需要大量时间和存储空间，时间成本和设备成本都大大增加了。而NetApp精简克隆技术，可以秒级生成多个数据克隆，完全消除了应用团队的等待时间。同时，这些克隆仅仅占用极少空间。更快生成更多的数据副本，更短的研发周期，更低的成本。因此，很多著名的企业，其研发系统和测试平台都选择NetApp。在本方案中，我们巧妙地利用备份存储来满足研发测试的要求，实现了硬件资源的充分利用。支持与虚拟化、私有云平台垂直整合，简化管理提升效率当前IT部门面临的一类挑战是，日益庞大的应用系统使IT基础架构的管理越来越复杂，而稍纵即逝的市场商机又要求IT基础具备快速应变能力。这就要求对IT基础架构有纵向的整合管理能力，同时能够实现自动化的工作流程管理。NetApp与虚拟化、私有云软件厂家深度合作，实现了管理上的深度集成，使虚拟化平台或私有云平台可直接调用NetApp的数据管理功能，从而实现统一的IT基础架构的管理。管理人员不必懂存储，也可快速分配和调用存储资源，自助恢复数据，自动化容灾切换等。因此，NetApp可以帮助IT部门，从过去繁琐的基础架构管理中解脱出来，把更多的资源投入到应用服务上。虚拟化环境下最佳的存储平台NetAppFAS存储平台为虚拟化环境进行了专门的优化，以VMware为例，体现在以下几个方面：统一存储，支持VMware三种不同的部署协议NetApp的智能二级缓存技术，针对虚拟化环境中常见的I/O热点数据，提供了实时加速能力,效果明显优于其他厂家的自动分层技术（有业界标准的SAN性能测试SPC-1报告为证）最紧密的特性和管理集成。VMware和存储相关的白皮书，包括双活架构（vSphereMetroStorageCluster），容灾（SRM）和存储集成（VAAI），采用的唯一范例都是NetApp。此外，NetApp还提供了进一步的管理集成：VSC插件允许VMware管理员在权限范围内自由地调配和管理存储资源，从而大幅简化了运维模式。针对虚拟化环境下常见的备份难题，NetApp存储内置的备份功能提供了最好的解决手段。例如成都一个央企（DEC），部署了130个虚机，过去采用VAAI+传统备份软件备份方式，日备时间为6小时，而采用NetApp方案，仅需12分钟。总结起来，实现本次项目的基本目标和系统优化目标，前面提到大致有三种方法。简单比较如下：基于数据库的解决方案基于专门的双活存储网关的解决方案NetAppFAS8000核心业务数据库的同城双活很好，但有数据库品牌的限制很好很好文件服务双活不提供不支持支持异地灾备很好，但有数据库品牌的限制需要增加CDP平台支持数据备份慢，应用一致性实时，但非应用一致性很快，应用一致性数据恢复速度慢一般快系统扩展性依赖于底层硬件网关和后端盘阵必须同时扩展，投资较大很好，支持横向扩展和纵向升级优化运维管理N/A本身由双活网关、盘阵、CDP三个产品组合而成，管理复杂度增加大幅简化管理。仅一种平台，且提供丰富的自动化管理手段，与应用和虚拟化平台实现深度的集成加速应用研发无无精简克隆，极低空间，生成多个数据副本，支持并发测试原有存储利旧支持支持VMware环境多协议支持仅FCSAN全部协议VMware环境热点数据加速双活网关无法提供二级缓存自动识别加速热点数据VMware双活架构支持支持VMware备份不支持必须引入备份软件内置，且优于备份软件VMware远程容灾不支持必须依赖CDP平台内置由此可见，基于数据库的方案限制较大。而专门的双活存储网关功能单一（因为并非存储厂家的最核心产品），必须引入CDP、备份等不同的平台组合在一起，不但会增加系统复杂度，也给后期运维和管理带来很大的困难。而NetApp，将至繁归于至简，一个存储平台，也是我们最核心的产品FAS8000，可以很好地满足以上所有需求，同时也保持了架构的简洁和管理的便利。下文是具体的方案设计。

需求分析和设计思路需求分析当前系统现状当前，南充商行核心业务系统目前已经实现了两地三中心。其中，生产存储采用一套EMCVNX5500，同城灾备存储为CX4-480，异地为CX3-40。同城利用MirrorView实现容灾复制，数据实时更新；异地则利用SANCopy复制技术，数据每天更新一次。服务器为IBMPower小型机，也有部分X86服务器（采用VMware虚拟化平台），核心业务数据库为Oracle11g。可以发现，在业务迅速发展的今天，生产存储在性能和功能上，都难以满足业务发展的需求；而且，如出现部件故障，使存储性能下降，必将严重影响联机交易的速度。而两个灾备中心存储设备非常老旧，基本是EMC两代以前的产品。除此之外，我们建议将同城容灾系统升级为同城双活系统。原因如下。同城容灾系统的挑战在同城这一环节，双活技术是优于传统同步容灾技术。传统容灾技术有以下局限：故障后切换时间太长，对业务影响很大目前同城灾备模式一般为“主备”模式，虽然同步容灾技术可以实现RPO=0的目标，即零数据丢失，但是由于同步复制的原理，导致容灾库数据平时完全不能够被主机访问和使用。即下图中，源端存储实时地将生产库的变化，复制并更新到目标端的容灾库。因为这个更新是底层存储发起的，并非通过上层的数据库软件完成，所以容灾端的数据库必须保持关闭状态。只有断开容灾复制关系，才能在容灾主机端重新设备和导入存储设备，挂接和打开数据库。再加上灾难后的网络切换、数据检验时间，导致整个容灾切换过程通常以小时来计算。具体的过程一般如下：同城容灾中心断开容灾复制关系容灾库挂接到灾备主机上，启动容灾库检验容灾库数据有效性将业务请求重定向到容灾中心，接管生产主备关系的容灾模式，容灾中心设备闲置率高由于前面提到的技术原因，容灾库实际上一直只能够处于关闭状态，因此所有的业务全部在生产中心处理，而容灾中心设备利用率很低，无法分担生产任务。逻辑故障应对能力较弱由于生产库和容灾库为实时同步，因此当生产端出现逻辑故障，如误删除一张表、误删除一个数据文件（OracleDatafile）、Oracle出现bug导致无法启动，容灾端也会出现同样的故障。目前应对此类故障主要依赖于备份软件。但恢复数据和业务时间通常都是以小时来计算，对业务影响较大。管理复杂度较高由于容灾库平时都是关闭状态，如何保证其数据的有效性和可用性？而且容灾切换大部分都是人工操作，如何确保应急预案可以顺利地执行？因此在容灾系统建设中，都存在以下的制度和规定：常态化的数据验证和定期的容灾演练。这样无疑给运维带来巨大的管理和人力成本。对于以上的情况，双活数据中心具有更好的技术和解决手段。接下来，我们将对这些技术进行介绍和分析。建设目标和设计思路为解决前面提到的问题和挑战，本方案提出以下几点建设目标：同城灾备升级为同城双活，消除严重故障对业务的影响全面提升业务连续服务能力均衡负载，资源利用更充分和合理优化管理，降低运维成本为实现以上建设目标，可按照以下设计思路，逐步建设和完善。主备数据中心升级为双活数据中心国内金融行业数据中心主要经历了以下几个阶段：第一阶段，从2000年左右开始，逐步实现了业务数据的集中整合。在运营模式上，采用区域化集中再到总行集中。从基础架构上，实现了数据的集中整合管理，利用存储区域网络实现了业务主机到后端存储的互联互通。数据大集中，不但有利于银行增强业务和资金头寸的统一化管理，而且通过专业的数据中心建设，大幅提升了IT管理水平。然而，实现数据集中后，虽然通过主机双机集群技术，实现了一定程度的高可用，但是单数据中心模式相当于把所有鸡蛋都放到了一个篮子里面，因此，第二阶段建设势在必行。第二阶段，大致从2003、2004年左右开始，开始灾备系统的建设。对于全国性的银行，异地灾备是必然的选择；而对于地区性银行，城域距离的灾备中心是更加普遍的选择。生产、灾备中心通常都采用“主备”模式，即所有的业务都在生产中心运行，灾备中心只是保持实时的数据更新，一旦发生故障，才紧急启用。这种模式虽然解决了第一阶段带来的风险问题，但是不足也很明显，正如2.1.2节中分析过的。后来，很多银行将“主备”数据中心升级为“生产–查询”中心，利用灾备中心的容灾库数据（前面已经提到过，不能直接使用和访问），通过克隆等手段，得到一份可以使用的副本（但是和生产数据有一定的时间差异），用于报表、开发等用途。这在一定程度上分担了生产中心的负载，同时也使闲置的灾备中心资源得到了部分利用。然而前一节提到的多数问题，并没有得到有效的解决，尤其是生产中心故障后，业务影响时间还是过长。为有效地解决以上问题，唯有将主备数据中心，升级为双活数据中心，类似于Oracle数据库，从90年代的主备模式，升级到RAC双活模式。两个数据中心运行同一个业务、同一个数据库，不但负载均衡，而且当一边数据中心故障后，对应用无影响。下图清楚地展现了数据中心高可用模式的发展路线图：业界对于双活数据中心解决方案进行了深入的研究和发展。2006年开始，主机厂商、存储厂商和数据库厂商逐渐将该技术推向市场。目前，双活数据中心已经非常成熟，而且得到了广泛的应用。因此，国内部分银行开始了第三阶段的发展：主备数据中心升级为双活数据中心，并在此基础上进一步完善为“两地三中心”模式。这个阶段始于2012年。双活数据中心实现后，可以达到以下目标：极大提升业务连续服务能力发生重大故障后，业务运行不受影响，消除了现有环境中“容灾切换”带来的停机时间。核心业务系统得到最完善和最充分的保护。我们预计，对于物理故障，双活数据中心可以实现RPO=0和RTO=0的理想目标。业务负载分摊到两个数据中心，避免了资源闲置故障后可实现自我修复，大幅降低了人为因素无需常态化的容灾数据检验和容灾演练，降低运维压力和成本利用先进数据保护技术，全面提升逻辑故障防范能力容灾技术和双活技术都无法解决逻辑故障，因为两中心的数据完全是镜像关系，一损俱损。目前解决此类故障主要依赖于备份软件，通过定期的备份来保护数据。恢复方面，可以通过恢复最近的备份点，再加上数据日志重做来恢复到故障前的数据。然而备份软件的恢复速度基本上需要耗费数小时，对业务影响极大。尤其是在业务数据日益增长的今天，这个缺点尤其突出。如何解决这个问题呢？目前业界提供的解决方法包括：基于存储的快照备份和恢复技术采用存储快照技术，有着备份快和恢复快的优势。对于任意大小的生产库，可以实现秒级的数据备份和恢复。快照备份，是基于时间点的备份技术(PointInTime)，因此要恢复到故障前的状态，还需要结合数据库和应用的日志恢复技术。根据我们的了解，由于快照不影响生产性能，而且恢复速度快，因此快照技术被广泛地应用于国内外银行生产系统的数据保护。连续数据保护软件(CDP)CDP技术的应用范围较少，尤其在大规模的核心应用这一块，难觅踪迹。CDP的特点在于，该软件会忠实记录每一个写操作到一个单独的存储空间，因此可以反向回退到任何任何时间点。部署方式有主机agent、存储网络附加设备和存储控制器三种。CDP的缺点在于：由于CDP的实现原理，对应用性能有一定影响恢复大量数据速度较慢。如果大量数据已经重新修改，则恢复时间很长。另外一种情况，如果批处理失败，需要快速恢复到批前数据，CDP的恢复速度远远低于快照恢复速度。以上的分析可以简单总结为：快照优点是备份恢复快，不影响性能；缺点是需要结合数据库日志技术。而CDP虽然可以方便地恢复到任一时间点，但对生产性能有一定影响，而且恢复时间会因数据改变量而异。综合起来，快照技术对现有生产影响更小，实施风险也较小，而且完全能够满足RPO和RTO的要求，更适合银行业务需求。异地容灾系统升级为应用级虽然同城双活数据中心实现了数据中心的冗余配置，并构成了一个高可用集群，但是对于要求7×24×356提供服务的金融系统来说，一旦出现区域性灾难，如地震、洪水、电网瘫痪等极端情况时，将导致全行业务的瘫痪，甚至数据丢失。因此，有必要在双活数据中心的基础上，建立一个异地的应用级灾难备份数据中心，实现应用和数据的三重保险，使得银行能够为用户提供优质、高可靠的服务。由于同城双活数据中心可以应对绝大多数的故障和灾难，因此考虑到投资的合理化分配，异地灾备中心设备能够支持低于生产系统的降级配置。目前南充商行已经建设了数据级异地容灾，可考虑将利旧设备搬迁至容灾中心，升级为应用级容灾。一方面提升了业务系统对灾难的防范能力，另一方面也有效利用了现有生产资源。异地灾备系统的目标是在有限的硬件资源和网络条件下，实现RPO<5分钟，RTO<60分钟。“两地三中心”建设目标小结按照以上设计思路，可实现的建设目标具体量化如下表所示：情景解决方案业务系统运行情况单一组件故障（较高概率）全冗余系统架构零影响单一生产存储故障（低概率）双活数据中心RPO=RTO=0数据中心瘫痪（低概率）双活数据中心RPO=RTO=0生产数据逻辑故障(低概率)快照结合日志恢复RPO~0（恢复到出现故障前）RTO<20分钟区域性灾难（极低概率）异地灾备系统RPO<5分钟RTO<1小时整合服务器虚拟化未来可以考虑在此架构上，统一整合服务器虚拟化数据，原因如下：当前银行IT发展的方向是，越来越多的重要业务系统迁移到虚拟化平台上。因此这部分业务的连续运行，也需要得到保证。由于业务系统之间关联度较大，将核心业务和重要业务数据整合到一套“两地三中心”平台上，有利于统一管理，而且易于实现不同应用交易一致性的备份。与其分散资源构建多个平台，不如集中资源，统一建立一套更高标准的基础架构，在不同应用之间共享资源和灵活调配，更加符合城市商业银行灵活、快速的定位。当前最先进的存储技术，如NetAppFAS8000系列，可以同时满足数据库、虚拟化平台在双活、容灾架构上的部署。设计方案方案总体描述为实现上述的建设目标，我们设计的系统拓扑示意图如下：为实现在整个建设过程中进度、风险可控，建议可分阶段来实施：现有同城容灾系统升级为同城双活实现两地三中心，升级异地灾备系统为应用级建立完善的数据保护机制，并优化数据中心管理建立灵活高效的研发测试系统第一阶段，建立双活数据中心前面已经讨论过，双活数据中心是当前成熟的部署方式，相对于传统主备容灾，有很多优点。但首先需要分析的是，双活数据中心如何落地？可行性分析完整的双活数据中心需要以下几个层面的支持：双活的存储架构。支持一个数据库实例在两个数据中心之间互为镜像，任一损坏都不会影响应用运行。跨数据中心的存储网络互连（ExtendedFabric），Oracle官方建议RAC之间的链路延迟低于1ms（Round-Trip）。跨数据中心的主机高可用跨数据中心的应用双活跨数据中心的应用网络互连，要求延迟低于1ms（同样是OracleRAC的要求）因此，首先需要确认可以获得低延迟的裸光纤链路，用于存储的最低要求是4对裸光纤：用途连接设备光纤(对)服务器到存储原有SAN交换机互联2双活存储互联(心跳)MC内部SAN交换机互联4（建议）主机高可用方面，无论是IBMPowerHA、HPServiceGuard、MSCS、VCS等都支持长距离的高可用集群。因此这个条件也是具备的。应用方面，主要应用是OracleRAC。OracleRAC在这种远距离距离的实施，早在2006年就有大量的安装案例了。可参考Oracle白皮书《OracleRealApplicationClustersonExtendedDistanceClusters–UpdatedforOracleRAC10gRelease2》，发布日期是2006年10月。OracleRAC在NetAppMetroCluster上的应用是非常成熟和可靠的，早在2008年，Oracle官网就介绍了RAC和NetAppMetroCluster的案例，见：/us/solutions/custstory-rac-gottwald-177716.pdf下图描述了OracleRACExtendedCluster基于NetAppMetroCluster技术上的实现(两地三中心)：值得指出的是，当前其他应用平台都能够支持双活技术了，如DB2、vSphere等。VMware的白皮书“VMwarevSphereMetroStorageClusterCaseStudy”就以NetAppMetroCluster为例，阐述了VMware如何实现双活数据中心。综上所述，现有生产环境升级到双活数据中心完全是可行的。升级之后，同一个应用可以同时跑在两个数据中心，两个数据中心对客户端提供统一的接入接口。可以这样讲，逻辑上的一个应用，物理上分布到两个数据中心，均衡负载，互为备份。发生任一单点故障，均不会影响应用运行。请参见下图：风险和影响分析由于双活数据中心的各个组成方面，或者是已经具备条件，或者采用成熟解决方案，如果实施计划周密，风险完全可控。两个数据中心之间采用可采用运营商裸光纤，同时也可利用xWDM设备实现线路复用（南充商行将部署DWDM设备），满足双活的基本要求。如有将来有条件，可考虑增加不同的运营商或者物理路径，从而实现链路的物理冗余。另外一个需要考虑的因素是长距离OracleRAC的性能是否会降低。根据Oracle官方文档的评估，在20KM距离下，OracleRAC在两个数据中心上运行的性能，比所有设备在同一数据中心运行的性能，性能低了不到5%：双活建设方案存储方案建议选择NetAppFAS8040统一存储设备作为核心应用持续高可用存储。核心应用存储由两套FAS8040统一存储构成，两套FAS8040之间通过同城DWDM光纤连接，采用光纤链路实现互相的心跳检测及数据传输，存储系统采用物理磁盘组成两份物理镜像通过SyncMirror软件实现磁盘数据同步，利用MetroCluster技术实现存储远程双活集群。借助第三地的Tiebreaker仲裁节点，可以有效地防范双活架构中的“脑裂”（SplitBrain）现象，并实现自动化的故障恢复。NetAppFAS8040磁盘阵列作为是NetApp公司的最新一代的统一存储架构的磁盘阵列产品，能够为用户提供高性能、大容量存储系统。NetAppFAS8040不论从性能、可靠性和扩展能力都可以满足用户对当前和未来的数据存储系统的要求。FAS8040是一款中高端的企业级存储设备，SAN平台下最大支持8个控制器、256GB一级缓存和16TB二级缓存，最大容量为2880块磁盘、11.5PB，可以支持最多96个16Gb光纤通道口。建议南充商行核心业务系统和虚拟化平台运行在NetAppFAS8040双活存储集群上。每个数据中心配置FAS8040双控，64GB一级缓存，1TB二级缓存（原有VNX5500仅有24GB一级缓存），8块SSD和60块SAS盘。双活部署以后，更是达到4个控制器，128GB一级缓存、2TB二级缓存，16块SSD和120块SAS盘的规模。FAS8040双控，配置192块SAS盘，SPC-1测试结果超过86000SPC-1IOPS。根据类似规模银行客户的应用经验，FAS8040完全可以满足南充银行数据中心核心双活存储的性能需求。综合业务平台数据基本上为结构化数据，可以考虑采用高性能、低延迟的FCSAN网络部署。每个数据数据中心需部署两台SAN交换机，形成冗余的存储网络。而文件类非结构化数据，可以采用NAS方式进行部署，网络为IP网络，同样需要建立冗余的访问路径。对于虚拟化平台，可选择部署在NAS的大文件系统上，通过NFS协议访问，非常有利于管理和扩展，也可选择FCSAN方式，利用其高性能、低时延的特点。总结起来，本阶段双活数据中心达到的目标是：针对各类物理故障（故障场景分析可见5.1节）可实现零数据丢失和零应用影响。所需要具备的条件和设备如下：6对裸光纤链路（其中4对用于存储互联，2对用于主机端SAN网络互联）。南充商行已部署DWDM设备实现链路复用，可以大幅节省费用。对称部署的NetAppFAS8040双活存储NetAppTiebreaker软件NetApp专业实施服务第二阶段，完善异地容灾，实现完整的“两地三中心”架构第一阶段双活完成后，可总结第一阶段的经验，并着手第二阶段的实施。在异地灾备中心，可以利用一台NetAppFAS8000，虚拟化利旧的EMC存储，与生产中心的FAS8040MetroCluster双活存储实现远程容灾复制。采用的复制技术是FAS8000内置的SnapMirror远程容灾功能，可直接支持IP链路，支持链路压缩。SnapMirror允许客户选择适当的同步级别（同步、半同步和异步），从而实现了较高的灾难恢复保护级别。其中异步模式复制间隔最低为1分钟。SnapMirror支持数据的增量反向远程复制：在正常情况下，业务数据从主磁盘阵列复制到容灾磁盘阵列上。在主磁盘阵列发生故障无法正常运行的时候，前端主机可以直接访问容灾磁盘阵列上的数据，当主磁盘阵列恢复正常运行的时候，这时可以利用SnapMirror增量反向远程复制功能以增量的方式把容灾磁盘阵列上那些变化的数据复制到主磁盘阵列上，大大缩短了系统恢复到原有状态所需的时间，使得两边的数据再次保持一致，然后就可以恢复SnapMirror的正常数据复制。服务器方面，可利旧原有服务器，应用级容灾。双活系统所需的Tiebreaker，可部署在容灾中心。容灾验证和演练容灾数据的验证和测试，以及定期的容灾演练，是容灾系统建设不可缺少的部分。通过容灾数据的验证测试，以确保容灾中心的数据完整性和可用性；而定期的容灾演练，有利于让维护人员熟悉容灾流程，完善应急预案。使用NetApp独有的精简克隆技术，可利用任一快照，秒级生成克隆，极低空间占用。利用这些克隆可方便地进行容灾系统中必须定期完成的容灾演练、数据验证。请参见下图：第三阶段，完善数据保护机制随着数据量的增加，同时希望故障后对业务的影响降到最低，因此有必要建立多重数据保护机制。前面提到，对于逻辑故障，现有解决方案是采用传统备份软件。但是在恢复速度上满足不了新的要求。解决办法是：使用双活存储设备自身的快照备份功能，实现秒级数据备份和恢复优化原有备份方式，例如采用D2D2T的备份方案，备份和恢复速度上得到一定的提升，同时也可以保留离线归档备份。未来灾备存储也需要建立快照历史备份，有效应对逻辑故障传递建设完成之后，可以达到的效果是：恢复最近的数据，可利用双活存储自身的快照备份，秒级数据恢复，分钟级恢复应用恢复较长时间前的数据，从近线存储（可考虑未来部署一套）恢复，可实现分钟级的数据恢复逻辑故障防范–秒级备份和恢复NetAppFAS8000内置快照功能，提供秒级备份和恢复功能，有效防范逻辑故障(海量文件、数据库和虚拟机的最有效备份恢复方式)利用NetApp卓越的快照技术，对Oracle、DB2、SQLServer以及海量文件系统进行数据一致性的秒级快照备份。备份窗口从原来的几个小时缩短为1~2分钟，仅仅为数据进入热备模式时间+1秒。对于同一个数据库，NetApp支持多达255个时间点的历史备份。如数据库（Oracle、DB2、SQLServer）或文件系统发生逻辑数据错误，可使用SnapRestore进行快速的恢复。数据恢复时间为数秒，再加上日志重做的时间，应用恢复可控制在十几分钟至数十分钟内，远低于其他方案的数个小时。虚拟化平台（如VMware）下，因为备份窗口过长,传统的备份技术更加难以适应。而NetApp的快照技术，不但可以通过秒级备份和恢复解决这一问题，而且还可以实现与VMware在管理上的集成。即备份恢复数据，仅仅需要在vCenter内部调用NetApp的功能即可，无需掌握备份软件、无需掌握存储管理技术，提升应用在线能力的同时，大幅降低了管理的复杂度。D2D备份设计规划在未来，还可利用现有一套NetAppFAS6220(或另外增加)作为近线存储，利用高效的SnapVaultD2D备份，提升应用的可用性。和传统备份模式相比，NetAppSnapVault是Server-Free方式，备份流不通过主机，因此不会影响主机性能；而传统方式为LAN或者LANFree方式，对主机性能有一定的影响。除此之外，NetAppSnapVault和传统备份模式相比，还有如下优点：项目NetAppSnapVault传统D2D备份数据备份很快，秒级更多的备份点很慢，小时级一天一个备份点对生产的影响无较大，且时间较长数据恢复很快，秒级很慢，小时级空间效率高，仅一次全备的方式，加上消重技术较高，仅虚拟带库的消重技术备份验证方便，且不需要空间–降低人力、硬件成本复杂，且需要额外空间–额外人力和硬件成本备份数据利用备份数据为主机可以直接识别和挂接的格式；可方便用于开发、培训以及生产应急，提升投资回报率只能用于数据恢复许可证方式总体很低：仅一次性购买，再多的主机接入、再多的数据量，均不会增加成本总体很高：按主机数量收费，每增加业务主机，需要额外购买备份软许可SnapVault的工作原理可参见5.2节。备份策略制定建议：数据类型本地快照备份SnapVaultD2D备份关键业务数据库每小时，保留最近30份最近2天每小时一次；一周内每天2次；一个月内每天一次；一年内每周一次；非关键业务数据库每半天，保留最近10份一周内每天2次；一个月内每天一次；一年内每月一次；虚机系统数据每半天，保留最近10份一周内每天2次；一个月内每天一次；一年内每月一次；优化管理NetApp提供自动化存储服务定制，支持与客户数据中心业务流程管理软件的集成：可利用NetApp管理工具实现存储服务自动化。也可和第三方管理软件进行无缝集成，同时NetApp也开放API和SDK，支持用户自定义云管理平台。通过定制化的自助服务环境，使内部客户在几乎没有或是根本没有管理人员介入的情况下请求和获得适当配置的IT资源，是实现整体业务灵活性和服务快捷性的一个重要步骤。这样一来，可轻松实现：持续满足服务级别快速扩展和添加新应用和IT服务以最少的投入满足不断变化的业务需求高效利用IT资源，最大限度地提高硬件利用率通过自动执行重复性活动来提高生产率借助集成工具和自动化配置流程来简化管理第四阶段，建立高效的研发测试机制在产品和研发阶段，未来加快把新产品推向市场，缩短研发周期，往往需要进行并行化的产品测试。然而，不同的测试小组之间，以及测试和开发人员之间，都希望数据使用的独立性，以避免相互干扰。这就意味着需要多个数据副本。传统的存储技术，每份克隆都要占用一份空间。这样，存储资源消耗严重：NetAppFAS8000具有专利的精简克隆技术，相同的数据，共享底层物理存储，因此占用空间极少，完全可以生成更多的数据副本，进一步并行化加速测试流程。这是降本增效的一个典范，也使NetApp存储作为大部分知名企业研发部门的首选。整合服务器虚拟化目前，越来越多的银行将重要业务系统部署于虚拟化平台上，以获得更加灵活和弹性的资源管理和供给。我们建议南充商行将服务器虚拟化平台部署在NetAppFAS存储上。NetAppFAS存储平台为虚拟化环境进行了专门的优化，以VMware为例，体现在以下几个方面：统一存储，支持VMware三种不同的部署协议NetApp的智能二级缓存技术，针对虚拟化环境中常见的I/O热点数据，提供了实时加速能力,效果明显优于其他厂家的自动分层技术（有SAN标准性能测试SPC-1报告为证）最紧密的特性和管理集成。VMware和存储相关的白皮书，包括双活架构（vSphereMetroStorageCluster），容灾（SRM）和存储集成（VAAI），采用的唯一范例都是NetApp。此外，NetApp还提供了进一步的管理集成：VSC插件允许VMware管理员在权限范围内自由地调配和管理存储资源，从而大幅简化了运维模式针对虚拟化环境下常见的备份难题，NetApp存储内置的备份功能提供了最好的解决手段。例如成都一个央企（东方电气），部署了130个虚机，过去采用VAAI+传统备份软件备份方式，日备时间为6小时，而采用NetApp方案，仅需12分钟。降本增效。NetAppFAS内置消重功能，针对VMware环境中，大量冗余的虚机映像，能够节省90%以上的存储空间。虚拟化环境中的性能提速技术虚拟化平台对存储性能的要求非常苛刻，已成为业界的共识。存储性能的高低，将决定着应用性能的快慢，也决定着用户交易的体验。如何衡量不同存储性能的高低？业界公认的方法是通过第三方的公开性能测试，如代表FCSAN性能的SPC-1，代表NAS性能的SPECSFS2008。值得指出的是，SPC-1性能结果高低，虽然不能代表真实业务环境的存储性能，但是至少提供了一个公平公开公正的比较手段。性能测试结果往往以IOPS的形式展现。但必须注意的是，这个数字和用户购买的存储的性能IOPS，完全是两回事。因为用户购买的存储，和性能测试的存储，在配置上差别很大。性能测试往往都采用满配，以达到最好的结果。但用户配置，往往受容量需求和经费限制，远低于测试配置。因此，我们建议用性能效率来进行衡量，即通过测试IOPS/测试配置，来得到单位硬件能够提供的性能，以比较不同存储之间的性能差异。在相同配置的情况下，性能效率高的存储系统，可以提供更高的性能。提升性能效率的方法，在保证性价比的前提下，除了不同的存储操作系统的算法差异以外，主要有两种：二级缓存技术，如NetAppFlashCache和FlashPool，EMCFastCache。是以闪存作为存储的二级缓存。这种技术不做任何数据迁移，因此对于性能提升的反应速度和效果都非常好。自动分层技术，如EMCFast、IBMEasyTier，HDSDynamicTier，需要在不同的性能层之间迁移数据。对性能提升的反应速度较慢。但如果应用的热点数据分布变化本身较慢，这种技术也有不错的效果。NetApp采用先进的控制器技术，存储具有最领先的性能效率。下图对比了几种主流的SAN存储产品，包括IBM最新的DS8870、HP最高端的P10000(即收购自3PAR的产品)、HDS的VSP(HPOEM的型号是p9500，即XP24000的下一代)，而EMC没有参加SAN性能测试。(数据来源：SPC-1标准FCSAN性能测试。图中反映的是，在SPC-1测试中，单个磁盘可以提供的IOPS性能。显然，更好的技术，可以让同样的磁盘发挥更好的性能)。这意味着，相同的磁盘配置下，NetApp可以为业务提供更多的IOPS性能。例如，在测试中，NetAppFAS6240仅仅需要432块普通SAS磁盘，采用RAID6，可获得25万SPC-1IOPS，而HDS最高端VSP使用了1152块SAS盘，采用RAID10，取得26.9万SPC-1IOPS。试想如果应用容量需求仅仅需要100块SAS盘，那么NetAppFAS6240仍然可以提供6万左右的SPC-1IOPS，而VSP却不到3万SPC-1IOPS。这里面最关键的技术之一就是NetApp领先的虚拟分层和大容量二级缓存技术。其他厂家也具有自动分层，多级缓存技术，但从未经过标准性能测试检验。虚拟化环境中的数据保护和灾备前文已经提及，VMware双活架构vSphereMetroStorageCluster支持NetAppMetroCluster，而且其技术白皮书正是以NetAppMetroCluster为范例。此外，在虚拟化环境中的数据保护具有如下特点：NetApp的快照技术可集成于VMware环境中，提供秒级的数据备份和恢复。NetApp可以提供VM中单个文件的恢复NetApp全面支持VMwareSRM容灾软件NetApp专利的快照技术可轻易地集成到VMware环境中，可实现虚拟主机的恢复、完整的虚拟主机克隆，或者站点复制以及冗灾等。这种解决方案的优点在于它是存储界唯一对系统性能没有负面影响的快照技术。VMware也声明为了达到最佳的性能和扩展性，建议使用给予硬件的快照解决方案而不是软件的快照解决方案。在基于磁盘的备份方案中，包含了从生产系统拷贝虚拟磁盘文件到备份的磁盘系统。尽管和直接将生产系统的数据备份到磁带相比，这种方式提供了非常快速的备份方案，但是每次备份都需要100%的额外空间。某些友商提供了Copy-Out的快照技术，但是Copy-Out快照技术所带来的性能问题，严重地影响了生产，使得这些快照技术也不能被用户所接受。而NetApp的专利的快照技术完全没有传统的基于磁盘备份的固有的问题。而和Copy-Out的快照技术相比，NetApp的快照技术由于不移动数据，从而不会产生对性能的负面影响。同时，NetApp快照技术的开销只是变化的数据块，占用空间更少。NetAppFAS和VMware的深度集成NetAppFAS系列存储和Vmware虚拟化软件实现了深度的集成，可以最大化提升运行效率，简化管理。VMwarevCenter通过调用FAS设备插件，可以驱动FAS执行一系列任务。比如备份、灾备功能，菜单化部署单元功能。FAS存储分别通过VMware的四个插件实现不同的功能。以下是详细的调用关系如下图所示。VSC存储管理插件在云计算架构下，管理不再是存储、服务器、网络等分离式管理，统一的、集成的管理平台是云存储的最佳实践。vCenter是虚拟化平台的管理平台，在vCenter上集中对存储进行配置、监控等是虚拟化平台与云存储结合的一种推荐方式。为此，FAS系统存储拥有专门的vCenter上的存储管理插件VirtualStorageConsole（VSC）。它主要有以下功能：虚拟存储控制台配置和克隆备份与恢复NFSPlug-in插件ESXServer通过NAS的NFSPlug-in插件，可以将NAS文件系统挂载到ESXServer，作为NFSDataStore。通过NFSPlug-in插件，还可以定义虚拟机IO的优先级，保证关键业务的IO的优先级，不受其它业务IO性能影响。SRA插件SRA插件由NetApp提供，部署在SRMServer上，与SRM软件实现无缝连接。在SRM界面，通过SRA插件可以直接调用的SnapMirror（存储复制功能）和FlexClone（虚拟克隆工具），实现灾备功能和虚拟机克隆功能。VAAI插件VAAI（vStorageAPIsforArrayIntegration）是VMware提供存储管理接口，主流的NAS和SAN存储都支持这个接口，并针对VAAI提供专用的插件，部署在vCenterServer。NetApp存储提供的VAAI插件，可以实现虚拟机和存储空间的快照和恢复功能、NFSDatastorge参数调整和配置功能。VASA插件VASA的目的是加强存储资源在VMware的可视化，可以通过vCenter和CapacityIQ工具获得对物理存储阵列的一些细节信息，如RAID信息，磁盘数量等等。内置消重功能，降本增效在VMware环境中，非常流行的部署方式是从预先创建的虚机的模板来快速创建新的虚机。一个虚机的模板通常包含了虚机的配置文件(.vmx)以及一个或多个虚拟磁盘文件(.vmdk)，包含了操作系统，公共应用程序，以及补丁文件或系统更新。从模板来创建新的虚机，通过拷贝配置文件以及虚拟磁盘文件，并注册成为独立的虚机，大大减少了管理上的时间开销。但是，在这种方式下，造成了大量的重复数据。下图说明了在VMware环境下的典型存储开销。NetApp提供了一种重复数据删除的技术，称为FASDedup。通过FASDedup技术，我们能够消除在VMware环境中的重复数据，大大提供存储的总体利用率。FASDedup提供了一种虚拟化的技术，使得多个虚机可以共享在NetApp主存储上的相同的物理数据块。FASDedup无缝的集成到VMware的环境中，而不需要在VMware的配置和管理中进行任何的改变。下图说明了VMware环境中启用FASDedup后对存储开销的影响。在实际环境中，可以节省90%的系统空间。目前，FASDedup是Volume级别的，它消除在同一个Volume中的重复数据。因此，为了更好地提高存储利用率，我们建议尽量将相同操作系统、相同应用的虚机部署在同一个datastore中，从而部署在启用FASDedup功能的FlexVol中。第四部分NetApp服务体系介绍

服务体系1.技术支持中心TSC(TechnicalSupportCenter)TSC是一个分布在美洲、欧洲、亚洲，包含多个支持中心的支持网络，能够在全球的任何地方为您的运营提供服务，从而保证最高水平的全天候支持。每个支持中心采用follow-the-sun模式为其邻近地区提供服务。该中心时间范围以外的呼叫将自动路由到一个开放着的支持中心，有效地让您的IT人员能够始终即时获得专业NetApp工程师的支持。TSC接受全球范围内包括电子邮件、电话和web的服务请求，同时自动处理经在线连接NetApp设备发回的自动支持（AutoSupport）请求，由支持中心专家组会同全球各地的现场支持队伍和合作伙伴，提供最快速的响应和有力的支持。目前，TSC支持中心分别位于加利福尼亚州桑尼维尔市（Sunnyvale）、北卡罗莱纳州Raleigh市、荷兰Amsterdam、德国Munich、印度班加罗尔（Bangalore）、大连以及日本东京等。技术支持中心（TSC）提供24x7x365全天候支持。在中国大连市，主要服务于大中华及北亚地区的NetApp全球第六个技术支持中心已于2007年九9月加入到全球支持中心的网络中，从而能为中国本地客户提供更加及时全面的技术支持服务。全球支持中心提供多种语种电话支持服务，包括英语、汉语普通话、韩语、日语、法语、德语、荷兰语等。全国统一的7x24服务热线:400-6566-577(中国普通话服务)2.TSC人员组成技术支持工程师（TSE）：是专职技术支持人员。TSE是具有熟练技能的工程师，负责日常与客户共同解决技术问题。客户服务代表（CSR）：为需要协助的客户提供第一线即时支持。CSR根据客户需要和实际情况，在线启动支持案例（SupportCase）和ReturnMaterialRequests（RMA）、处理备件订单、分派现场服务、处理AutoSupport讯息，并管理其它非技术领域的支持。全球支持中心经理：负责确保GSC的平稳运行和客户问题的及时解决。3.备件保障NetApp负责提供所有在服务范围内的损坏硬件的更换件。通过NetAppAutoSupport或NOW在线发出的故障通知将自动启动更换故障部件的流程，在其它情况下可由全球支持中心的NetApp客户服务代表启动该流程。他们将为您提供备件，以更换故障部件。故障部件将被换下，并需在10天之内返回NetApp。您还将从NetApp客户服务代表那里得到一个RMA编号，用于对您的返还备件进行跟踪。对于在购买产品时选择了Non-ReturnableSystemDisk计划的客户而言，您无需返还任何故障硬盘驱动器。更换上的部件保修期为90天，或原产品有效的剩余保修期（取时间较长者）。NetApp在全球拥有200余个部件仓库。每个仓库存放有NetApp产品的更换部件（备件包、主板、风扇、挡板、支架、电源等）。具体的仓库位置和交付速度信息可通过查询全球支持中心获得，或者咨询NetApp销售代表。中国范围内有北京、上海、广州、成都、南京、深圳、济南、大连等城市建有备件配送中心，可提供2小时、4小时或第二个工作日的递送服务。其他地区目前提供第二个工作日的备件配送4.中国分公司和支持团队NetApp在中国北京、上海、成都、深圳和广州设立了分公司，并在南京、西安、杭州及合肥等城市设有常驻工程师。这些有着经验丰富、技术高超的服务工程师，包括：客户服务经理（SAM）：对指定的用户进行case管理，风险提示等；并协调各种资源，并保持与客户的沟通，实现售后服务按时保质地完成、提升设备高可用性，高持续性，减轻用户运维压力。授权技术支持工程师（TPM）:提供本地化的售后服务和支持，将在用户现场解决问题。现场工程师（FSE）：提供本地化的售后服务和支持，将在用户现场解决问题。专业服务工程师（PSE）：提供本地化的安装和实施服务。专业服务顾问（PSC）：深入客户现场提供咨询服务和增值服务，包括客户需求确认、解决方案设计与咨询、工作文档和实施。他们贴近客户，可以根据需要和实际情况迅速到达用户现场，与客户进行充分交流，快速了解用户的实际应用，判断问题所在，最直接地加以调整和维护，力争使发生的问题给用户系统运行的所带来影响最小。同时，这些服务工程师遵循NetApp全球一致的服务流程和规范，保证中国用户同样得到NetApp全球统一的高品质服务。二．服务内容NetApp为了满足不同用户对于数据的安全性和服务能力的需要，制定了极其灵活的售后服务内容。在正常的保修期服务基础之上，对于关键性业务系统和不能有须臾停顿的企业级客户，我们提供SupportEdgePremium，能够远程地进行即时系统监控和维护；对于非关键性业务系统且有能力进行