HP-产品介绍---备份方案构建及相关产品介绍

1、备份基础知识与备份方案构建May， 2015刘浩洋 企业及服务咨询最新存储备份产品与技术介绍爆炸性增长的数据更小的窗口日益分散的数据严格的监管移动设备,虚拟化、云平台给数据保护提出新的需求移动终端设备数据为能及时被保护67%的用户有3种以上计算平台用户和应用实时性越来越高用户有更高的备份开销时间要求提供持续的业务运行环境变得越来越重要日益严格的监管要求和规范需要能及时找回指定对象对企业信息资产的全面利用每12到18个月数据增长一倍新的，非结构化数据需要管理存储增长速度超过了IT预算增长已经改变游戏规则的数据保护时间开销太长数据备份不完全劳动密集型备份基础知识备份（Backup）收集生产系统上的

2、数据，存储在备份介质上，万一当生产系统的数据丢失或不能访问时，可以用来进行恢复。备份就是创建备份副本的操作, 应用和用户不能直接访问备份副本。什么是备份？5文件服务器数据库服务器备份服务器磁带库磁带恢复（Recovery）重新创建生产系统应用或计算环境的过去操作状态在应用或计算环境被破坏或其他原因导致的不能使用后，需要进行恢复操作恢复模式：完全恢复，小颗粒恢复什么是恢复？6文件服务器数据库服务器备份服务器磁带库磁带备份传输模式LAN BackupLAN备份服务器生产系统LANSANLAN-free Backup主控服务器生产系统LANSANServer-less Backup备份服务器生产系统

3、LANSAN备份服务器Server-free Backup生产系统备份类型8备份类型原理优点缺点全备份对备份集合中所有数据进行备份完全恢复系统需要的时间最短。费时，如果文件不频繁进行更改，备份内容几乎完全相同。增量备份对自上次备份后改变的数据进行备份存储的数据最少，备份速度最快。完全恢复系统需要的时间比全备份或差异备份长。差量备份对自上次全备份后改变的数据进行备份恢复时仅需要最新全备份和相应的差分备份，备份速度比全备份快。完全恢复系统需要的时间比全备份长。如果大量数据发生变化，备份所需的时间长于增量备份的时间。合成全备份将上次全备份和与其相关增量备份或差量备份重新组成一个全备份第一次全备份后，

4、不再需要进行全备份，可进行永久增量/差量备份只能对文件系统、文档系统和邮件系统进行合成全备份，不能对数据库进行合成全备份。备份介质9备份设备优点缺点磁带库备份速度快保留时间长存储容量大价格低易于离场保护1. 磨损快，易出错2. 不易维护3. 顺序读写磁盘随机读写,速度快易于配置和维护可支持重复数据删除1. 很多原有备份软件不支持2. 无法实现离场保护光盘库寿命最长，介质不容易老化1. 备份和恢复速度最慢2. 硬件选择受限虚拟磁带库(VTL)随机读写,速度快易于配置和维护原有备份软件支持可支持重复数据删除1. 最贵2. 增加管理层次3. 无法实现离场保护1能够恢复设计备份/恢复时主要考虑因素保证

5、数据的有效恢复！102恢复的数据可以使用3恢复速度快4恢复对系统的影响要小5能恢复到指定的时间点备份数据定位备份成功率备份颗粒度数据保留周期与应用结合离场保护多个数据副本备份模式数据恢复目标对备份的要求什么是RTO/RPO？RTO (恢复时间目标) 在业务中断后的某一个时间点，业务的进程或应用服务必须恢复，确保业务正常进行（您能接受多长的宕机时间）RPO (恢复点目标) 在已确定的RTO内，应用数据或文件系统信息必须恢复到某一个时间顺序点 (您能接受丢失多少数据）数据保护时间轴Failure出错时刻12 hrs12 hrs12 hrs12 hrs12 hrs12 hrsRecovery Poi

6、nt Objective BUBURecovery Time Objective Recover数据保护方法对比分析RAID复制快照备份物理错误（47%）自然灾害YESYES硬件失效YESYESYESYES逻辑错误（53%）人工出错YESYES软件失效YESYES病毒YESYES恢复点（RPO）能容忍丢失多少数据？没丢失秒、分钟、小时小时天恢复时间（RTO）要多久才能恢复实时分钟、小时分钟小时、天数据保留时间能恢复多长时间内丢失的数据不能不能几小时几天几周几月几年数据保护系统主要有5个目标：防止物理错误、防止逻辑错误、满足RPO及RTO、满足数据保留的时间，没有一种单一的数据保护算法能同时完全

7、满足这5个目标。因此一个完整的数据备份系统应该是这几种算法结合而构成。为什么要进行重复数据删除在服务器应用中有大量完全相同的数据块不同计算机中，有许多完全相同的文件,特别在虚拟机中有80%以上重复数据。在连续的全备份数据中，有70%-90%的重复数据在归档文件中，也有大量的数据块是相同的当进行集中数据备份和归档时，重复的数据块会导致存储费用快速上升，同时也会占用数据传输带宽。如何进行重复数据删除原数据集合逻辑视图物理存储重复数据删除节省大量磁盘空间！在存储数据前，以块为单位进行哈希比对，对已经存储的数据块不再进行存储，只是用索引来记录该数据块；对没有存储的新数据块，进行物理存储，再用索引记录，

8、这样相同的数据块物理上只存储一次。通过索引，可以看到完整的数据逻辑视图，而实际上物理存储的数据却很少。重复数据删除的过程当数据从“源端”传输到“目标端”之前，在源端先对被传输的数据块进行哈希比对，如果该数据块先前已经被传输过，只需要传输哈希索引值；如果该数据块先前没有被传输过，就传输该数据块，并记录该数据块的哈希值。优点：可节约传输带宽缺点：要占用源端资源进行去重处理源端“去重”源端目标端传送的是新数据块和老数据块的索引当数据从“源端”传输到“目标端”的过程中，把数据块传送到目标端，在目标端进行去重操作。优点：不占用源端的资源缺点：不能节省传输带宽在目标端有两种处理方式：在线处理方式（In-L

9、ine）：在数据块存储之前进行去重处理，优点是占用存储空间较少，缺点是要影响数据传输性能。后处理方式（Post-Processing）：先把数据块存储在缓存中，等系统空闲时再进行去重处理。优点是不影响数据传输性能，缺点是需要额外的存储空间。目标端“去重”源端目标端传送的都是数据块不要迷信高“去重比”去重前容量去重后容量去重比这些曲线挤在一起，说明不同去重比之间，磁盘容量相差并不多。去重比去重前容量去重后容量容量相差20 : 120TB1TB1TB（相当1块硬盘）10 : 120TB2TB许多厂商过分夸大“去重比”作用，其实高“去重比”并不能节省太多存储费用！例如，去重比“20:1”与去重比“1

10、0:1”进行比较，结果只多节约了1TB容量，价值3000多元。也许购买“20:1”的去重设备需要多花费10多万元。不可否认去重比越高，对带宽的占用越低。高“去重比”影响恢复速度数据集合“去重”数据从“去重”数据中恢复数据反复多次读取相同数据块，会降低恢复速度。磁盘是机电一体化设备，顺序读的效率大大高于随机读的效率，随机读需要消耗大量寻道时间。“去重”虽然可以减少写入的数据块个数，但不能减少读出的数据块个数。高“去重比”往往会导致相同的数据块反复多次读取，大大增加了磁头寻道时间，严重影响磁盘的读性能。用户数据环境数据管理面临的复杂IT环境典型的IT环境管理层报告类型预检、费用、使用、报警、事件实

11、现目的恢复、ILM、检索访问方式桌面、WEB、PDASLARPO、RTO、DR应用层数据类型文件系统、数据库、邮件系统、文档主机层操作系统Windows、Linux、Unix虚拟环境VMware、Citrix、Hyper-V服务器Unix服务器、PC服务器存储层T1：生产层存放在线生产数据：文件系统、数据库、邮件系统等T2：恢复层存放快照、克隆、复制数据，满足快速恢复要求T3：保护层存放备份数据，防止生产层和恢复层数据丢失T4：保留层存放长期保留或归档数据，满足法规存储协议FC-SAN、IP-SAN、NAS存储厂家EMC、NetApp、HDS、IBM、DELL、HP网络层多网络内网、外网、因特

12、网、防火墙地点数据中心、DR中心、分公司、办事处、移动办公数据的3V特点数据的3V特性（Volume、Variety、Velocity）海量：已经跨入海量数据时代，需要处理TB级甚至PB级数据多样：数据库、文件、邮件、视频、图像、音频和其他种类数据速度：数据访问和处理速度，必须满足业务需求数据需要长期保存法规和审计对数据存储要求日益严格、规范，导致数据保留期增长数据就是资产任何资产必须进行有效的管理，才能真正实现其价值。对于数据资产来说更是如此，分散无序的、低质量的、错误的数据是没有多少价值的，甚至会给经营管理带来负面作用。数据管理的挑战22数据管理越来越复杂为了满足数据3V特征，用户不得不采

13、用更多存储设备，存储架构越来越复杂应用越来越多，数据管理手段各不相同，手工管理风险增高数据管理要求越来越高业务不能容忍生产数据不能访问和丢失，导致数据有更多副本：复制、快照、备份、灾备合规、审计要求数据长期保留，并能快速检索数据管理成本越来越大存储设备费用逐年增多管理人员人数逐年增多，技术水平要求更高非结构化数据通常把没有“数据模型”的计算机信息称为非结构化数据文字、图、音频、视频Microsoft Office 文档, Web页面，等。结构化数据关系数据库，应用Oracle, DB2, SQL Server非结构化数据VS结构化数据基于备份代理的保护在DB/App服务器上安装客户端软件在线备

14、份（DB/App在运行时可以备份）与原厂家应用接口（API）工具相集成快照保护（Snapshots）利用软件或硬件创建基于时间点的副本小时级别数据保护对生产系统影响较低复制保护（Replication）利用软件或硬件创建创建复制副本近实时数据保护不能防止逻辑错误转存（Dump）利用原厂的工具把数据备份到文件系统中需要多个步骤，没有统一的备份管理策略需要人工进行介质管理理解数据保护的选择明确了解客户具体的环境用户使用什么数据库和应用？具体的版本？在什么操作系统上？数据量有多大？有什么独特或特殊设置？集群？分区？内部使用还是商用的？探讨的问题-1询问用户当前数据保护的方法备份方法备份代理或快照或复

15、制或转存？全备份、增量、日志备份有备份计划吗？恢复数据的经验完整数据库、表或单个目标？描述最近恢复情况，成功吗？服务级别要求（SLAs）备份窗口能满足吗？RTO / RPO 能满足吗？探讨的问题-2努力发现用户所有的痛点性能低能在规定的窗口内完成备份吗？备份可靠性受到挑战吗？恢复操作很繁琐？服务中断影响到生产系统吗？灾难恢复 (DR)有什么样的DR恢复计划？做过恢复测试吗？成功还是失败？探讨的问题-3对未来发展及长期措施的理解要迁移和升级？有新的供货商吗？操作系统和DB应用要升级吗？有费用控制要求吗？准备要进行虚拟化吗？有DR 计划吗？有服务水平协议的细则吗？有法规遵从或电子数据发现需求吗？探

16、讨的问题-4数据管理原则操作简单数据可用安全可靠管理规范数据管理的基本原则30操作简单复杂的IT环境、海量数据的多样性导致数据管理操作十分复杂复杂管理操作会导致：出错风险增加、响应速度下降、增加管理人员或增加工作量操作简单化要求：简单操作能到达数据管理目的，重复操作过程自动化数据可用性数据能在规定的条件下和规定的时刻或时间区间内，处于可执行规定功能状态的能力。要求数据多个副本都具有可用性：在线、近线及离线数据安全性数据只能被有权限的用户进行访问，要防止数据泄露、更改或破坏安全性要考虑的问题：防止越权访问、防止数据被盗管理规范规范的管理组织架构制定数据采集、传输、储存、监控、分析的工作规范及数据

17、管理工作流程健全数据管理监控体制，实现数据采集标准化、数据运行自动化、数据分析制度化数据管理基本原则主要内容31制度管理管理人员的三层架构设置操作员（备份、查看结果）、管理员（所有操作、监控）、主任 （监控、管理）分散型用户的统一管理统一制订策略、统一监控各地人员只能管理所属的数据及设备系统健康检查提高备份的可靠性，防患于未然，检查的频率尽可能高检查主机状态、网络状态、软件状态、检查介质状态定期恢复演练定期进行异机恢复测试检验恢复环境、备份数据、恢复流程备份数据离场保护备份数据定期复制并出库周全备份保留一月、月全备份保留一年、年全备份永久保留出库后的介质管理哪些磁带取出、存放在哪一架哪一箱哪一

18、盒内、何时取回重用策略管理设定保留版本，确保数据恢复数据保留策略不仅需要设定数据保留天数据，还要设定数据保留版本数（周期数）提高小文件备份速度利用磁盘数据块备份来提高小文件备份速度数据库备份的良好习惯进行物理的在线备份，恢复速度快备份数据库日志，可恢复到任何时间点归档不常用的数据文件、邮件系统中有大量不常用的数据，有的高达60%，归档不常用数据可节省昂贵的存储空间，也能节省备份介质利用重复数据删除技术，减少IT成本有大量的数据是重复的，删除重复数据可节省存储，也可以利用有限的带宽恢复管理限制生产服务器的恢复一般情况下只允许备份，不允许恢复。确保生产服务器的安全小颗粒恢复，加快恢复速度，不影响其

19、他数据邮件系统：能实现单个邮件恢复AD：能实现单个属性恢复VMware：能实现单个文件恢复数据库：能实现表空间/单表恢复软件管理集中补丁管理集中了解备份软件版本，保证备份环境正常集中分发补丁运行，便于管理集中日志管理快速提交问题日志有助于快速定位和解决问题操作审计管理监督操作人员行为相关产品简介HP Data Protector 7 - 下一代IT数据保护HP StoreOnce 联合重复数据删除在您的企业环境的任何地方都可以实施重复数据删除 集成云备份传统异地备份方式将数据备份到全世界最大的私有虚拟化云 全面的虚拟化环境支持跨所有物理和虚拟化环境的无缝数据保护Autonomy IDOL10

20、集成对备份数据进行基于语义的字段搜索和数据恢复企业级应用程序保护快速的单个对象恢复和全面支持HP存储磁盘阵列快照7企业应用程序保护应用平台一次备份策略配置Microsoft Exchange, SharePoint, SQL Server、 Oracle等支持通过管理控制台实现单一条目恢复SharePoint, Exchange & Vmware应用支持3PARP4000P6000 (EVA)P9000(XP)P2000(MSA)阵列支持通过自动保护和即时恢复确保业务延续性Exchange 2010 Data Availability Group (DAG) 支持 与DAG紧密集成确保活动数据

21、库在被动故障切换以后继续进行数据保护无干扰的应用数据保护支持HP, EMC, 和NetApp快照支持与磁盘存储产品完美集成：P2000, P4000, P6000, 3PAR, P9000完全自动，从一个控制台即可实现秒级应用恢复瞬间恢复支持 P4000, P6000, P9000Data Protector企业级数据备份整合系统架构SAN GUI ConsoleCell Manager磁盘代理Disk Agent介质代理Media Agent应用程序代理（在线备份）Application Agent(Online Backup)Internal databases: - Files, ver

22、sions, hosts - Media, drives, librariesLAN用户数据Manager of Managers站点B备份至磁带备份至磁盘备份至虚拟磁带应用数据零宕机备份及瞬间恢复Zero Downtime Backup &Instant Recovery控制流备份数据流站点AIDOL 提供基于语义的数据保护Data Protection:Data Protector & Connected BackupSocial MediaVideoAudioEmailTextsMobileTransactional DataIT/OTDocumentsSearch EngineImag

23、es400+ Connectors & 500 Functions Next Generation PlatformConnectedAutonomy Intelligent Data Operating Layer，为数据创造生命Search EngineImagesSocial MediaVideoAudioEmailTextsMobileTransactional DataIT/OTDocuments01010101010101010100101010101010101010010101010101010101010010101010101010101010100101010101010

24、10101010100101010101010101010100101010101010101010101001010101010101010101IDOL10 可用 下一代信息管理规划为法规遵从和电子发现提供基于语义的数据管理可选择备份数据索引内容基于语义方式理解备份数据信息将备份数据作为一种资产加以利用满足法规遵从和加快诉讼请求响应基于语义的方式理解并调整备份策略HP Data Protector software基本模块LTU for one Cell ManagerUnlimited backup agentsOne drive LTUBuilt in media management

25、Libraries up to 60 slotsSystem disaster recoverySophisticated reportingSAN supportOpenView integrationsOn-line Backup 在线数据库备份许可Zero Downtime Backup 零停机备份许可Instant Recovery 瞬间恢复许可Advanced Backup to Disk磁盘备份许可Direct Backup 直接备份许可Manager of Managers备份域管理许可Data Protector Starter Pack 基本模块 Open File Back

26、up 打开文件备份许可Data Protector Single Server EditionData Protector Media Operations 备份介质管理许可Migration to Starter PackEncryption 客户端加密许可HP Data Protector 软件兼容性说明Disk AgentMicrosoft WindowsHP-UXLinuxSolaris (SPARC, x64)IBM AIXHP Tru64 UNIXHP MPE/iXHP OpenVMS (Alpha, IA64)Novell NetWareSCO OpenServer; SCO U

27、nixware SNI SINIX; SGI IRIXAdditional platforms via NFS, shared disk (CIFS) or NDMPMedia AgentMicrosoft WindowsHP-UXLinuxSolaris (SPARC)IBM AIXHP Tru64 UNIXHP MPE/iXHP OpenVMS (Alpha, IA64)Novell NetWareSCO OpenServer, SinixJava GUIMicrosoft WindowsHP-UX (PA-RISC, IA64)Solaris (SPARC)Linux SuSE, Red

28、 Hat Cell ManagerMicrosoft WindowsHP-UX (PA-RISC, IA64)Linux SuSE, Red Hat (x64)Solaris (SPARC)On-line BackupVMware ESX 3.xVMware ESXi 4.xMicrosoft SharePoint Portal ServerOracle Microsoft SQL ServerMicrosoft Exchange Microsoft VSS APIMicrosoft Internet Info ServerSAP R/3SAPDB / MaxDBInformixSybaseL

29、otus Notes / DominoIBM DB2HP Network Node MgrNative Windows GUIMicrosoft Windows更多兼容信息请访问：/go/dataprotector Teves AGHP Data Protector 软件的客户已逾超过22,000 家.这一数字仍在不断增加为何选择 Data Protector ？数据保护领域新规则基于语义的数据保护爆炸性数据增长逐渐攀升的花销智能移动终端的广泛使用缩小的恢复时间窗口企业级性能涵盖终端到数据中心整体解决方案为什么选择 Data Protector为客户带来的收益DP 7: 数据保护新领域联合重复

30、数据删除集成云备份虚拟化环境保护IDOL 10 整合企业级应用程序保护最大化存储资源效率和性能快速响应法规存储和电子发现要求提高应用程序高可用性更方便使用远程备份设备降低TCO当前的LTO产品路线图Compliant security for data at rest安全性：基于硬件的数据加密Hardware-based data encryption means:No performance degradation for compression or encryptionCompression occurs before encryption for optimum resultsEncr

31、yption keys are supplied by backup applications or key management appliancesComply with legislation - granted FIPS140-2 Level 1 certificationTapeHP LTO Tape Drive LTO-4, LTO-5, LTO-6 HardwareCompressionHardwareEncryptionDrive LUNsLTO5与LTO6的性能比较HP StoreEver LTO-6 Ultrium 6650 Tape DriveHP StoreEver L

32、TO-6 Ultrium 6250 Tape DriveFunctionalityLTO-5Ultrium 3280Ultrium 3000LTO-6Ultrium 6650Ultrium 6250Capacity*3TB6.25TBTransfer rate*1 TB/hr1.44 TB/hrLTFS CapableYesYesEncryption capableYesYesMid-RangeEntry-LevelEnterprise1-20 slots21-100 slots100 slotsNow with LTO-6 for even higher scalabilityHP Stor

33、eEver tape automation familyMSL SeriesSimple and low costIdeal for small servers or small networksDAS and LAN backupManageable, flexible, reliableSuitable for medium and large businessesDAS, LAN, entry-level SAN backupAutoloadersEML E-SeriesScalable, manageable, reliableMedium to large data centersM

34、edium to large SANsESL G3 seriesHigher capacity and performance pointsScalable, dual robotics capableLicensed features: automated media pool (AMP), control path, data path failover etc.Enterprise data centersLarge-scale SANsMSL系列磁带库比较MSL2024MSL4048MSL8048/8096Size2U form factor4U form factor8U form

35、factor48 slots96 slotsCapacity(2.5:1 compression LTO-6)(2:1 compression LTO-5/4/3)150 TB LTO-672 TB LTO-538.4 TB LTO-419.2 TB LTO-3300 TB LTO-6144 TB LTO-576.8 TB LTO-438.4TB LTO-3300 TB LTO-6144 TB LTO-576.8 TB LTO-438.4TB LTO-3600 TB LTO-6288 TB LTO-5153.6 TB LTO-476.8TB LTO-3Native InterfacesFibr

36、e ChannelSCSISASFibre ChannelSCSISASFibre ChannelSCSISASPossible configurationsUpper Library4048 (4U)8096 (8U)Lower Library 4048 (4U)96 slots(6HH or 2FH drives)144 slots(6HH or 4FH drives)2024 (2U)72 slots(4HH or 1FH drives)120 slots(4HH or 3FH drives)MSL Library Extender Kit Possible Configurations

37、NOTESThe Library Extender Kit does not support combining two MSL2024s or two MSL8096 libraries.The MSL8048 must have all 96 slot enabled before using the Library Extender. Once all 96 slots are enabled, the 8096 configuration rules apply. Provides a self-contained and easy to use encryption solution

38、 for ensuring that business data is protected from unauthorized access磁带存储安全: HP Encryption 工具Use with MSL2024, MSL4048, MSL8048/8096 & 1/8 Tape AutoloadersEasy-to-useFast installation simply plug into the USB port on the library or autoloaderEasily manage & configure encryption settings from the li

39、brary GUINo additional software, PCs, or servers are requiredFull-featuredUSB key server token will generate, store, and maintain tape encryption keysKeys are securely transferred token-to-token or token-to-PC for backup or exportUSB key server token uses hardware random number generator, strong password authentication, and digital envelopes for strong keys and security operationsIndustry standard security levelsLTO-5 & LTO-4 Ultrium tape drives offer AES 256-bit level encryptionUSB