统一数据管理-200800701

统一数据管理

美国慷孚系统公司资深工程师孙春杰CommVault简介专业数据管理软件厂商总部:美国新泽西州,Oceanport1996年从AT&T分立出来1998年完成产品架构的设计2000年推出第一个产品2006年9月在NASDAQ上市福布斯2007年全球增长最快的高科技企业位列第17位倡导“一体化信息管理”理念单一产品实现对数据保护,归档及复制的一体化管理在业界处领导者地位AbilitytoExecute执行力CompletenessofVision前瞻性NichePlayers观望者Visionaries观望者Challengers挑战者Leaders领导者Figure1.MagicQuadrantforEnterprisesBackup/RecoverySoftware,July2004andJuly2005.MovementindicateschangefromJuly2004toJuly2005.EnterpriseBackup/RecoverySoftwareGartnerMagicQuadrant2004-20052006年业界最受肯定的企业2008年蝉联业界最受肯定的企业超过8,000用户地区行业软件业零售制造业交通能源亚太区服务业InterpublicGroup金融政府电信娱乐高科技欧洲法律北美GovernmentOfCanada中国典型客户电信辽宁移动浙江联通贵州联通金融中国建设银行民生人寿总部渣打银行杭州商行企业上汽集团桑塔纳销售总公司苏州佳能南京盐业集团新东方学校吉林烟草广西烟草一汽大众H3CMaersk船务公司政府商务部文化部国土资源部上海海关内蒙公安杭州市交警广东省人大浙江省档案馆上海市及各区的城建档案馆电力大唐发电吉林电力浙江省能源集团互联网腾讯（QQ）易趣网第九城市百度企业数据现状数据量急速增长100TINFORMIXFILEExchangeSAP……一、数据类型和总量呈现高速双增长，昂贵的存储系统充斥着大量不必要的重复数据二、数据由简单的两层(原始数据/应用数据)向多层数据发展，数据分布趋向复杂，存储由一级走向分级存储原始数据应用数据原始数据VTL盘阵拷贝(快照)拷贝复制(异地)带库主机衍生数据传输网管话务网管原始话单……..系统备份迁移快照管理者复制规划优化投资策略归档报告报告报告报告三、数据保护停留在管理员层面，人工干预较多；管理员操作企业最关键的资产－数据，权责不对等；管理层不能及时直观的对数据进行管理NORMALDATABASE

SECONDARYDATABASE

DBDBDBDBIMPORTANTDATABASE

DB

DBBACKUPSNAPSHOT

四、没有数据分级标准，数据保护缺乏统一的策略统一数据管理策略管理资产管理审计管理配置管理故障知识管理通知管理数据分析统一数据管理SIM

SIM－统一数据管理功能身份管理统一数据管理的各个组成部分用户的问题资产管理现在的数据占用了多少存储，成本如何？哪些部门或者用户占用了多少存储，成本如何？不同类型的数据占用了多少存储，成本如何？哪些数据是不经常使用的，或者是无用的，这些数据占用了多少存储，成本如何？哪些数据操作占用了多少存储，成本如何？针对应用或者业务，不同类型数据占用的存储空间和相应的成本？针对不同的数据存储，如何规划我的数据存放？CommVault的资产管理只针对数据和存储而言：全局的存储资产管理方案资产管理能够按照不同的应用，部门或者用户，收集信息能够按照不同的数据类型，介质或者设备，收集信息能够按照不同的数据存放性质，收集信息（在线，近线，离线）能够按照以上的分类，赋予不同类型的数据，介质，设备不同的成本能够按照用户的需求，给出各种资产管理的分析报表CommVault能做到的事：常用报表资产管理报表举例-按照部门分类不同记帐部门的成本每个记帐部门的详细成本常用报表资产管理报表举例-按照数据分类次级存储的存储数据，可以关联相应的成本预算规划资产管理报表举例-预算规划CommVault的状态监控CommVault的状态显示你可以查看整个数据管理系统的状态你可以选择查看该系统的摘要信息或其它信息CommVault的状态监控CommVault的状态显示你可以去查看该系统中某个管理节点的信息你也可以清晰的看到某个管理节点的状态信息你也可以看到该管理节点的内容信息CommVault的状态监控CommVault的状态显示你可以查看某个设备的状态你可以查看该设备是如何使用的数据迁移-释放空间，提高效率，降低成本释放在线存储的大小，改进应用、备份和恢复的性能迁移数据可用来达到保存的目的（文件归档）解决容量配额问题

End-users&AppsTransparentin-placeaccessOutlookSearch&Browse数据迁移集1,000Gb之前Staticdata按周进行94数据保护集700Gb300Gb释放

300Gb之后66空间利用率增加30%备份减少30%自动回调迁移策略Itemsover365daysoldandbiggerthan10K解决大量数据占用存储空间的方法事实上有多少数据属于生产存储层？4.15%在生产层上有85%的数据不曾使用或者很少使用。只有5-15%的数据才是日常生产必须的。CommVault如何来做迁移资产数据保护方案－备份DBDataSPData网络备份SAN备份异地备份ServerFree备份数据资产安全的最后一道防线CommVault的策略管理方案策略管理CommVault系统中策略的含义：在传统的数据管理系统中，最重要的管理策略是2类：1类是计划策略的管理，说明了哪些数据在什么时间作哪种类型的数据操作；另外1类是管理数据保留方式的管理，说明了哪些数据在什么时间存放在哪种介质上（数据保留方式管理），这个定义了数据生命周期的管理方式。CommVault提供了针对这2种类型的策略管理，提供的是计划策略管理存储策略管理CommVault计划策略管理特点策略管理CommVault系统中计划策略管理方式的特点：CommVault提供了1个单一全局视图，用户可以在1个界面上设置，查看，修改包括：管理计划，保护计划，恢复计划，其它辅助计划等各种计划策略。CommVault也可以提供计划策略模板，关联多个管理单元，从而降低计划管理的复杂度。用户也可以制定触发器，来触发某一个动作，实现非计划或者事件触发的操作。CommVault存储策略管理特点策略管理CommVault系统中存储策略管理方式的特点：CommVault的存储策略管理，完成了数据保留方式的管理。CommVault的存储策略管理，提供了N级别的存储管理方式，从而能够真正实现数据生命周期管理。CommVault的存储策略管理，跨越了多个应用层次，能够把备份，归档结合在一起，实现全局的近线，离线数据的存放管理。备份归档存储策略原理示意图每个数据副本可以指向不同的设备每个数据副本可以设置不同的保留时间以实现ILM存储策略中含有多个数据副本计划策略管理说明策略管理可以以日历的方式管理计划策略CommVault的身份管理特点身份管理CommVault的身份管理包括2个方面：区域管理：说明该用户对哪些区域或者部门的服务器有管理权限角色管理：说明该用户有哪些操作权限1个用户的权限是上面2个内容的交集为了方便用户的权限管理，CommVault采用了类式WINDOWSAD的管理模式，利用安全组的方式来设置管理；同时，还能将AD的权限引入CommVault系统，并且和CommVault系统的权限关联，从而实现SSO功能。CommVault权限管理的结构图身份管理(MSDS)NovellDirectoryService(NDS)(OpenLDAP)LightweightDirectoryAccessProtocol(LDDAP)操作区域对象ActiveDirectory用户组CommCell用户组CommCell扩展域组CommCell用户功能权限CommVault介质预防故障功能特点故障处理说明CommVault数据预防-校验功能特点故障处理说明CommVault的通知和报警通知和报警CommVault的通知和报警管理是通过3个功能来具体实现的。一个是报警功能，另外一个是报表功能，还有状态显示功能。通过这3个功能，利用GUI，WEB，文件，邮件，SNMP，事件查看器，电子传呼机等方式，将已经发生或者将要发生的事件或者错误传送给管理人员，从而避免，减少，分析，预防操作错误。CommVault报警功能特点报警管理你可以为该报警采用各种通知方式你也可以修改报警的内容你还可以添加报警的标签定义CommVault报表功能特点报表管理用户可以制定报表的呈现方式你可以通过邮件发送给管理人员你也可以把它保存到文件或者WEB服务器上，供管理人员查询CommVault审计管理的内容审计管理针对突发事件的审计能够查询和寻找针对系统某个事件的内容，例如：设备故障，人员操作等等。针对人员的审计能够针对操作人员做的任何操作，记录并且查询。例如：登陆，退出，修改配置等等。针对数据操作的审计能够针对某个应用数据作的任何操作，进行记录并且查询。例如：某个应用是否在需要的时间进行了备份，备份是否成功，具体情况如何。针对事件的审计管理审计管理CommVault将系统运行期间所有发生的事件都存放在数据库中，你可以通过事件浏览器查看，也可以通过报表工具查看。数据分析能够降低成本，提高效率数据分析ESI存储数据增加迅速效率下降成本上升主存成本增高应用效率下降备份时间增长备份成本增高数据分析1年以上的文档没有访问有些文档的用户并不重要某类文档不重要如MP3,AVI等采用分级存储的技术手段控制主存成本不影响效率减少备份成本减少备份时间数据分析能够控制预算数据分析存储数据增加应用类型增加企业业务增长无法精确预测数据的发展预算不可控预算过少满足不了需求预算过多造成资源浪费成本上升数据分析知道不同应用的数据发展趋势知道不同性质的数据发展趋势知道不同设备的数据发展趋势精确预测数据的发展精确计划未来的预算数据分析使用举例－分级存储数据分析按访问时间的数据分析按文档类型的数据分析按文档拥有者的数据分析归档操作设置界面归档操作后的结果可以得到归档后的成本核算数据分析使用举例－法规查询需求数据分析技术特点体系结构上的优势CSEnterpriseCommCellAiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaMAiDaMAiDaMAiDaMAiDaMAiDaMAiDaMAiDaMAiDa6258个客户端:AIX,Solaris,Windows827MediaAgent–SANDisk&Tape每周2000TB的增量备份CommVault–更灵活、更容易扩展竞争对手–只能增加管理域统一的逻辑目录，分布式架构–-整个管理域只有一个视图优化的索引引擎具有极大的灵活性、数据完整性和性能分布式架构为跨区域集中管理打下了坚实基础合成全备份IncrementalsFull123456789103536352412345678910273383610IncrementalsSynthFull12345678910SynthFullForExchange,LotusDomino,AllFileSystems，ImageLevelSIS是怎样工作的:WeeklyFullBackupABCDAEFGAHIJAWeeklyFullBackupAB’’C’D’AE’FG’AH’IJ’’AArchiveADEFI同样的文件跨越不同的客户端，如：Windows文件系统和应用IncrBackupB’C’G’相同的文件不需要再次重复写入IncrBackupB’’H’J’Da