OceanStor Dorado存储基于VMWare VSI重删压缩配置指南

1、华为 OceanStor Dorado6000 存储基于VMware VSI 场景的重删压缩配置指南虚拟化为数据中心带来了一次伟大的变革，企业数据中心已经由传统数据中心逐渐转向虚拟化，而且数量正在不断增长。在 VMware VSI 基础架构下使用华为存储重删压缩特性改善资源利用、提升运营效率。目录 HYPERLINK l _bookmark0 概述4 HYPERLINK l _bookmark1 内容简介4 HYPERLINK l _bookmark2 面向读者4 HYPERLINK l _bookmark3 用户收益4 HYPERLINK l _bookmark4 关键组件4 HYPERLI

2、NK l _bookmark5 负载模型5 HYPERLINK l _bookmark6 数据库类5 HYPERLINK l _bookmark7 邮件类5 HYPERLINK l _bookmark8 Web/App 类5 HYPERLINK l _bookmark9 适用场景6 HYPERLINK l _bookmark10 服务器虚拟化6 HYPERLINK l _bookmark11 业务场景6 HYPERLINK l _bookmark12 注意事项7 HYPERLINK l _bookmark13 VSI 场景配置存储压缩特性8 HYPERLINK l _bookmark14 VS

3、I 场景应用简介8 HYPERLINK l _bookmark15 数据库类8 HYPERLINK l _bookmark16 邮件类8 HYPERLINK l _bookmark17 Web/App 类8 HYPERLINK l _bookmark18 解决方案9 HYPERLINK l _bookmark19 方案架构9 HYPERLINK l _bookmark20 方案硬件配置9 HYPERLINK l _bookmark21 方案软件配置10 HYPERLINK l _bookmark22 方案存储配置10 HYPERLINK l _bookmark23 应用配置11 HYPERLI

4、NK l _bookmark24 验证步骤11 HYPERLINK l _bookmark25 环境部署11 HYPERLINK l _bookmark26 数据重删压缩效果测试12 HYPERLINK l _bookmark27 4 附录14 HYPERLINK l _bookmark28 参考文档14 HYPERLINK l _bookmark29 术语表14 1 概 述内容简介OceanStor Dorado6000 V3 全闪存存储的智能数据重删压缩特性（SmartDedupe & SmartCompression ），旨在减少冗余数据占用的存储空间，提高存储系统的传输、处理和存储效率

5、。本文主要验证 OceanStor Dorado6000 V3 全闪存存储的 SmartDedupe &SmartCompression 特性在 VMware VSI 场景下的效果，旨在为华为合作伙伴和华为用户的 IT 系统解决方案提供参考。面向读者本文档面向华为员工、合作伙伴与客户。用户收益使用华为 OceanStor Dorado6000 V3 全闪存存储的 SmartDedupe & SmartCompression 特性，能有效减少冗余数据及其所占用的存储空间。关键组件本文中描述的内容主要基于以下硬件和软件。硬件：华为 OceanStor Dorado6000 V3 全闪存存储系统 V

6、300R100C00 版本华为 RH2288 V2 服务器应用软件和测试工具：VMware vSphere 6.0 虚拟化软件Huawei UltraPath 8.06.063 多路径软件Oracle Database 数据库软件Microsoft Exchange Server 2013 邮件软件Web 2.0 负载测试软件SLOB 测试工具Microsoft Exchange Load Generator 2013 测试工具应用操作系统：Redhat Enterprise Server 6.5Windows Server 2012 R2 x64SUSE Linux Enterprise S

7、erver 11SP2负载模型数据库类本文使用业界通用的 SLOB（Silly Little Oracle Benchmark）测试工具模拟了 Oracle OLTP（Online Transaction Processing）业务负载模型。从 I/O 层来看，该业务负载模型为小数据块随机访问，读写比例可变，代表了一种典型的 OLTP 业务模型。邮件类本文使用与Exchange Server 配套的测试工具Load Generator 2013 模拟了Microsoft Office Outlook 2003/2007（联机和缓存）和 Outlook Web App 客户端活动。该测试工具可以

8、使用一种或多种协议生成负载，从而达到模拟邮件类业务的效果。Web/App 类本文使用 Apache 旗下的一个基于 Web 2.0 的应用和负载生成器模拟了 Web/App 类虚拟服务器的业务模型。该类虚拟服务器需要处理运行程序和大量用户请求的业务逻辑，并将存储在数据库或文件系统内的动态资源传输客户端，是典型的 Web/App 类业务模型。 2适用场景服务器虚拟化将独立部署在大量物理服务器上的应用部署在虚拟机上，可以有效提升服务器资源利用率、实现管理维护的便捷性、实现更好的扩展性和可靠性，为 IT 带来了一次伟大的变革。据调研机构的数据显示，应用已转向虚拟化平台的比例越来越高，随着业务的不断增

9、长，企业的业务数据也呈现爆炸式的增长，需要存储的数据越来越多。随着数据量的增大，企业可能面临如下问题：业务数据中可能存在大量的冗余数据。冗余数据的增长势必导致购买存储设备的费用大幅增长。存储设备的增加，提高了维护管理的复杂性。同时，为了维持设备的正常运行，需要投入大量的资金用于建设机房环境、提供电力和冷却系统。冗余数据带来的价值远远小于企业用于维护存储设备的成本。因此，在保证信息不丢失， 不影响业务数据准确性的前提下，缩减冗余数据量，减少冗余数据占用的存储空间已经成为了企业不可避免的问题。为了解决上述问题，OceanStor Dorado V3 全闪存存储提供 SmartDedupe &Sma

10、rtCompression 特性，解决了冗余数据占用大量存储空间的问题，实现存储资源利用率最大化，同时提高存储系统的传输、处理和存储效率。业务场景华为 OceanStor Dorado6000 V3 全闪存存储提供的 SmartDedupe & SmartCompression 特性在虚拟化应用场景中具有较大的优势。在虚拟化应用中，用户将大量虚拟机文件存放在存储设备中，这些文件通常包含相同的操作系统，这就意味着大量的重复数据，另外用户数据也存在大量的重复数据。华为 OceanStor Dorado6000 V3 全闪存存储可以对接不同厂家的虚拟化平台，用户可根据实际情况在虚拟化平台之上构建多个

11、虚拟化应用以满足不同的业务需求。表 2-1 描述的是常见的虚拟化平台及部分虚拟化应用，版本支持满足兼容性的所有通用版本。表2-1 常见业务场景虚拟化平台VSI 应用存储VMware ESXIWeb/App Server Oracle Database Microsoft SQL ServerMicrosoft Exchange Server华 为 OceanStor Dorado V3 全闪存存储Huawei FusionComputeMicrosoft Hyper-VCitrix XenServerFile Sharing ApplicationERP Application注意事项为达到更

12、好的重删压缩效果而不影响性能，请在实际配置中注意一下几点：数据库类虚拟服务器建议应用层面不开启压缩，并且将虚拟机的系统盘与数据盘分开放置于不同 LUN 之中，系统盘所在 LUN 只开启重删，数据盘所在 LUN 只开启压缩。华为 OceanStor Dorado V3 全闪存存储系统采用全局重删方式，因此，数据缩减效果与 LUN 数量无直接关系，可配置多个 LUN，提高并发性以提高性能。邮件类和 Web/App 类的虚拟服务器，应根据实际应用和性能需求，确定重删压缩配置。 3 VSI 场景配置存储压缩特性VSI 场景应用简介根据虚拟机的资源需求，可将虚拟机归类于“算密集型”、“网络密集型”、“

13、存储密集型”三种类型，根据不同类型虚拟机的存储需求（容量、IOPS/GB、响应时间等）， 制定不同的存储方案和重删压缩配置，做到最大化资源利用率。企业资源管理系统和办 公协作系统的核心系统都是基于数据库系统，其业务特性和数据库系统的业务特性类同。因此，虚拟化的关键业务可以分为数据库系统、邮件服务系统和企业 Web 系统三类。数据库类数据库虚拟机属于计算密集和存储密集类型。数据库业务承载着企业的关键信息资产， 其性能和可用性要求最高，随着虚拟化技术的发展，将传统数据库服务器部署在虚拟化 平台上，可实现服务器虚拟化，极大地降低了生产和维护成本。常见的数据包括 Oracle 和 Microsoft

14、SQL Server，部署数据库类的虚拟机时，应考虑分配高 SLA 级别（高 IOPS/GB、低 I/O 响应时间）的存储池，满足关键应用的性能需求。邮件类邮件类虚拟机属于计算密集和网络密集类型。在 Exchange 2013 中，邮箱服务器角色通过以下过程直接与 Active Directory、客户端访问服务器和 Microsoft Outlook 客户端进行交互：邮箱服务器使用 LDAP 从 Active Directory 中访问收件人、服务器和组织配置信息。客户端访问服务器提供身份验证、代理和有限重定向服务，并提供所有常见的客户端访问协议：HTTP、POP、IMAP 和 SMTP。客

15、户端访问服务器是无状态的瘦服务器，不执行任何数据渲染。客户端访问服务器上从不会排队或存储任何内容。Web/App 类Web 类虚拟机属于网络密集和存储密集类型。此类虚拟机运行 Web 和应用服务器，为最终用户提供客户端接入和业务逻辑处理等功能，Web 或应用服务器接收到用户的HTTP 或 TCP/IP 请求时，运行服务器端的网页、脚本、Java 等程序，处理业务逻辑，并从本地读取静态文件，从后端的数据库服务器获取或更新动态数据，从后端的文件服务器获取或更新动态文件，将数据传输到客户端展现。Web/App 服务端程序和静态文件一般只有几十 MB若干 GB，在频繁的用户请求过程中，这些程序和静态文

16、件一般会缓存到服务器内存，不再从盘上读取，该类虚拟机产生的 I/O 主要来自于服务器程序日志和OS 内存交换，对 I/O 吞吐量和 I/O 响应时间的要求不高。解决方案方案架构本方案使用 4 台服务器，2 台 16G 光纤交换机搭建的双交换网络；组成 VSI 环境进行测试；主要测试内容是 OceanStor Dorado6000 V3 全闪存存储的 SmartDedupe &SmartCompression 特性解决业务数据增长时冗余数据占用大量存储空间的问题。本方案中验证的问题：1） 使用 SmartDedupe & SmartCompression 特性对后端存储空间的节省情况。图3-1

17、方案架构方案硬件配置服务器采用华为 RH2288 V2 服务器，存储采用 OceanStor Dorado6000 V3，配置 2 台 8G光纤交换机，2 台 1GE 交换机，具体配置如表 3-1 所示：表3-1 硬件配置设备名称组件数量服务器RH2288 V2：256GB memory2 Intel(R) Xeon(R)E5-2660 CPUs2 Qlogic 8Gbps FC Dual-Port HBA2 Intel 1Gbps Ethernet HBA card4存储设备OceanStor Dorado6000 V3： 2 controllers1 2U 25 slots disk en

18、closures 25 900GB SSD disks2Four-Port SmartIO I/O Modules1光纤交换机SNS222421GE 交换机S57002方案软件配置软件和操作系统选择使用通用版本，多路径软件选择匹配 OceanStor Dorado6000 V3 的版本，具体配置如表 3-2 所示：表3-2 软件配置环境项目名称软件数据库环境操作系统Redhat Enterprise Linux Server 6.5数据软件Oracle Database 邮件系统操作系统Windows Server 2012邮件工具Microsoft Exchange Server 2013W

19、eb/App 软件操作系统SUSE Linux Enterprise Server 11SP2存储OceanStor Dorado6000 V3V003R100C00多路径软件UltraPathHuawei UltraPath 8.06.063方案存储配置创建一个硬盘域，采用高热备策略；在硬盘域创建一个存储池，采用 RAID6 配置。为了便于管理，数据库和邮件虚拟机都采取系统盘与数据盘分开放置的方式，3 种应用的LUN 的容量和数量参考图 3-2。图3-2 存储配置示意图（表）LUN 名称ID重删压缩开关容量描述VSI_DB_OS_010重删500GB存放数据库类虚拟机的系统盘VSI_DB_O

20、S_021重删500GB存放数据库类虚拟机的系统盘VSI_DB_DATA_012压缩1TB存放数据库类虚拟机的数据盘VSI_DB_DATA_023压缩1TB存放数据库类虚拟机的数据盘VSI_DB_DATA_034压缩1TB存放数据库类虚拟机的数据盘VSI_DB_DATA_045压缩1TB存放数据库类虚拟机的数据盘VSI_Mail_OS6重删压缩500GB存放邮件类虚拟机的系统盘VSI_Mail_DATA_017重删压缩7TB存放邮件类虚拟机的数据盘VSI_Mail_DATA_028重删压缩7TB存放邮件类虚拟机的数据盘VSI_WEB_DB_019重删压缩500GB存放 Web/App 类的数据

21、库虚拟机VSI_WEBserver_0110重删压缩500GB存放 Web/App 类的服务器虚拟机应用配置表3-3 应用配置表应用类别需求容量/类型/数量数据库类读写比例7：3DB 配置数8邮件类邮箱数量2000邮箱大小2GB用户预置数据1GB每日发送/接受邮件数150Web/App 类Web Server 总数20验证步骤环境部署表3-4 环境部署步骤TaskStepDescription1准备物理环境（硬件及组网）2安装配置操作系统2.1在四台 RH2288 服务器上安装 ESXi 6.02.2配置 IP 地址2.3安装 OceanStor UltraPath 并重启系统3配置存储子系统3.1导入存储配置需要的相关 License3.2配置存储资源 (Disk Domain, Storage Pool, LUNs, LUN group)3.3创建主机、主机