V3双活实施方案精编版

1、xxxx局点双活项目实施手册修订记录i日期修订修改修改描述作者版本章节2015-10-1501初稿完成谢丰ii目录1前言11.1文档背景11.2术语定义12交付实施方案22.1实施总体架构22.2IP 地址需求2阵列地址需求2仲裁虚拟机地址需求33双活实施部署33.1存储配置方案3存储软件版本4License 许可4存储端口划分4HyperMetro数据同步参数设置53.2多路径配置53.3阵列配置操作5登录 DeviceManager5创建硬盘域6创建存储池7创建 LUN7创建 LUN 组9创建主机10创建主机组10安装仲裁软件11配置仲裁软件13检查 License13增加远端设备13创建

2、仲裁服务器14创建双活域15创建双活16iii（可选）创建端口组16创建映射视图17iv1 前言1.1文档背景此文档用于指导搭建xxxx 局点双活容灾方案交付和维护。1.2术语定义术语表术语描述Active-Active双活GEGigabytes EthernetHyperMetro华为存储双活功能12 交付实施方案2.1实施总体架构方案总体架构1. 阵列间使用4 条光纤链路进行数据同步，同时也是阵列间心跳链路，A、B 控并行相连，各2 条链路。2. 阵列与主机间链路为 GE链路，阵列每个控制器有 2 个端口与主机相连，提供前端业务。2.2IP 地址需求阵列地址需求存储IP 端口掩码DC1存储

3、管理端口 IP75DC1存储业务端口 IP00/101/102/103DC1存储仲裁端口 IP00/101DC1存储管理端口 IP76DC1存储业务端口 IP04/105/106/107DC1存储仲裁端口 IP02/1032仲裁虚拟机地址需求仲裁虚拟机IP 端口仲裁虚拟机3 双活实施部署3.1存储配置方案硬盘域规划

4、DiskDomain 名磁盘数量磁盘类型磁盘容量（ TB）备注称DC1_DiskDomain 25SAS1.2用于 VMwarevSphere 5.5DC2_DiskDomain 25SAS1.2用于 VMwarevSphere 5.5POOL规划POOL名称RAID策略热备策略预期容量（ T）磁 盘 数备注量DC1_StoragePoolSAS ：raid5高20.5425（ 8D+1P）DC2_StoragePoolSAS ：raid5高20.5425（ 8D+1P）LUN 规划：POOL LUN名称 ( 生产中心 )LUN_IDLUN类型归属控制器容量DC1_S DC1_VMWare_L

5、un00000Thick0A4TBtorag DC1_VMWare_Lun00011Thick0B4TBePoolDC1_VMWare_Lun00022Thick0A4TBDC1_VMWare_Lun00033Thick0B4TBDC1_VMWare_Lun00044Thick0A3TBDC2_S DC2_VMWare_Lun00000Thick0A4TB3torag DC2_VMWare_Lun0001 ePool DC2_VMWare_Lun0002 DC2_VMWare_Lun0003 DC2_VMWare_Lun0004存储软件版本1234Thick0B4TBThick0A4TBThi

6、ck0B4TBThick0A3TB部件类型版本存储阵列 OceanStor V3V300R003C00多路径软件 UltraPathV100R008C20许可使用设备sn 号和合同号向华为license 中心申请license 发放， hypermetro 的 license 为纸件 license。存储端口划分端口遵守以下规则:1端口用途主要分三类：主机应用端口、双活数据同步端口以及仲裁端口。这三类端口在方案中相互独立，不共用。2平行组网是华为双活推荐的复制链路的组网方式，所谓平行组网从概念上理解就是A、 B 控之间链路不作全互联交叉处理。平行组网示意图：主从端阵列归属控制器一致。站点阵列端

7、口需求（每个控制器）连接阵列DC1_Storage2DC2_Storage3这样可以防止归属控制器为 A 控的 LUN，数据同步链路在从端 B 控接收 IO，导致通过内部通道转发一次，降低性能。建议在引擎上均匀分布复制链路。4数据同步参数设置参数设置参数名称同步速率恢复策略参数说明数据同步的速率，包括：低中高最快系统故障，远程复制的 Pair 进入断开状态。当存储系统从故障中恢复以后，采取的恢复方式，包括：“手动 ”：Pair 进入 “待恢复 ”状态，需要管理维护人员根据情况手动对远程复制一致性组进行 “同步 ”操作，使一致性组中所有成员复制的主 LUN 和从 LUN 数据进行同步。“自动 ”

8、：Pair 进入 “同步 ”状态，系统根据一致性组中所有成员复制的主 LUN 和从 LUN 的状况， 自动将有差异的数据增量同步到 LUN 中。配置建议当前环境中使用“最快”建议使用 “自动 ”模式3.2多路径配置设置多路径工作模块为负载均衡：1. 将阵列双活 LUN 映射至 ESXi主机后，查询阵列 id。 esxcli upadm show diskarray2. 设置负载均衡。esxcli upadm set hypermetro workingmodem balance p array_idArray_id 为 show diskarray 查询出来的 id。 -p 指优先阵列。3.3

9、阵列配置操作登录 DeviceManager操作步骤53. 在维护终端运行 Internet Explorer 。4. 在地址栏中输入 “并按 “”Enter。”系统进入 DeviceManager 登录界面。说明：o浏览器可能会提示网站的安全证书有问题，此时只要确认IP 地址正确，您仍然可以选择忽略该提示并继续访问存储系统。在 “用户名 ”和 “密码 ”中输入登录的用户名和密码。说明：o当出现 “验证码 ”时请输入正确的验证码。o若您连续输入密码错误次数达到系统“密码策略设置 ”中的 “错误次数 ”，系统自动锁定您的帐号，并在锁定时间结束后解锁。单击 “登录 ”。创建硬盘域硬盘域的硬盘类型决

10、定了存储池可以创建的存储层级，为了构建存储池需要首先创建硬盘域，在硬盘域中需要指定构成硬盘域的硬盘类型和数量。操作步骤1. 进入 “创建硬盘域 ”对话框。a.在右侧导航栏上，单击。b. 单击 “硬盘域 ”。c. 单击 “创建 ”。系统弹出 “创建硬盘域 ”对话框。2. 设置硬盘域的名称和描述。a. 在 “名称 ”文本框中输入待创建硬盘域的名称。b. 在 “描述 ”文本框中输入待创建硬盘域的用途、属性等，用于标识该硬盘域。3. 设置组成硬盘域的硬盘信息。a. 选择相应的存储层的硬盘。b. 设置该存储层中的硬盘个数说明：对于仅支持SSD盘（高性能层） 的存储系统， 在创建硬盘域时不存在选择硬盘类型

11、（存储层）的操作。创建硬盘域时，如果用户规划中明确需要在该硬盘域中创建含有RAID 10 级别的存储池， 建议为硬盘域的每个存储层手动选择硬盘，且每个存储层中归属于同一个引擎下的硬盘数为偶数，从而保证RAID 10 级别存储池的可靠性。4. 单击 “确定 ”。6系统弹出操作成功提示信息。5. 单击 “确定 ”，完成硬盘域创建。创建存储池应用服务器使用的存储空间来自于存储系统的存储池，因此，为保障应用服务器能够使用存储系统的存储空间，需要首先创建存储池。操作步骤1. 进入 “创建存储池 ”对话框。a.在右侧导航栏上，单击。b.在左侧资源分配管理界面的“查看与管理 ”区域，单击 “存储池 ”。系统

12、进入 “存储池 ”界面。c. 单击 “创建 ”。系统弹出 “创建存储池 ”对话框。2. 设置存储池的名称和描述。a. 在 “名称 ”文本框中输入待创建存储池的名称。b. 在 “描述 ”文本框中输入待创建存储池的用途、属性等，用于标识该存储池。3. 在 “硬盘域 ”中选择待加入的硬盘域。4. 在 “存储介质 ”中选择存储池中需要的存储层并设置相关参数。a. 根据实际业务需求选择相关存储层。b.设置存储层的基本信息。说明：对于仅支持SSD盘（高性能层）的存储系统，在创建存储池时不存在选择存储介质（存储层）的操作。 当存储池由多个存储层组成时，建议设置SmartTier 策略，保证不同热度的数据在不

13、同性能的存储层间转移，使存储性能的分配得到优化。5. 执行存储池创建操作。a. 单击 “确定 ”系统弹出 “执行结果 ”对话框，提示操作成功。b. 单击 “关闭 ”，完成存储池的创建。创建 LUN成功创建存储池后，存储池的存储空间不能被主机识别。只有将存储池中的存储空间划分为多个逻辑单元（ LUN），并将 LUN 映射给主机后，主机才能使用分配给它的存储空间。操作步骤71. 进入 “创建 LUN”对话框。a.在右侧导航栏上，单击。b. 单击 “ LUN。”c. 单击 “创建 ”。系统弹出 “创建 LUN”对话框。2. 设置 LUN 的参数。相关参数说明如下表所示。LUN 参数参数名称参数说明参

14、数设置名称新创建 LUN 的名称。取值范围 o名称不能重复。o只能包含字母、数字、“、.”“ _、”“-”和中文字符。o长度为1 31 个字符（ 1 个中文字符占 3 个字符长度） 。起始 IDLUN 的 ID。说明：o系统默认为新创建的LUN 自动分配一个 ID。o如果需要手动设置LUN ID，请取消选择 “自动分配 ”后手动输入ID。o 创建单一 LUN 时，您输入的值为该LUN 的 ID。o 批量创建 LUN 时，系统从您输入的值开始为 LUN 自动分配一个 ID。容量LUN 的容量。取值范围 o当启用 SmartThin 功能时，此容量为分配给 thin LUN 使用的最大容量。 即后

15、续系统动态分配给thinLUN 的存储资源的总容量不能超过此值。o当不启用SmartThin 功能时，此容量为一次性分配给thick LUN 使用的容量。使用所属存储池全勾选该参数后， 系统会将所有空闲存储空部空闲容量间都分配给该LUN。初始分配容量初始状态实际分配给thin LUN 的容量。启用 SmartThin 后，该参数有效。数量批量创建的LUN 数量，可以根据需要在文本框中输入LUN 的数量。o 创建 thick LUN 的最大容量小于等于所在存储池的可用容量。o 创建 thin LUN 的最大容量小于等于系统规格。取值范围 o thin LUN 的初始分配容量小于等于所在存储池的可

16、用容量。o thin LUN 的初始分配容量小于等于该 LUN 分配的容量。取值范围 8说明：1100o批量创建的LUN 的容量都是相同的。o批量创建的LUN 的总容量小于等于当前所属存储池的可用容量。手动指定后缀编号当创建多个 LUN 时，系统会根据数量自动在输入的名称后增加后缀编号以示区分。选择此选项后， 您可以手动设置起始后缀编号。说明：如果不选择此选项， 系统默认起始后缀编号为 0000。起始编号系统从您设置的起始编号开始， 自动在输入的名称后增加后缀编号以示区分。所属存储池o选择创建 LUN 所属的存储池。o如果系统不存在存储池，可以单击“创建 ”进行存储池的创建。确认创建LUN 的

17、操作。.单击 “确定 ”。系统弹出 “执行结果 ”对话框，提示操作成功。a. 单击 “关闭 ”。创建 LUN组为方便同时管理和映射多个LUN，可以在逻辑上将多个LUN 构成一个LUN 组。操作步骤1. 进入 “创建 LUN 组”对话框。a.在右侧导航栏上，单击。b. 单击 “ LUN。”c. 选择 “ LUN组 ”页签。d. 单击 “创建 ”。系统弹出 “创建 LUN 组 ”对话框。2. 设置 LUN 组的参数。选择要添加到 LUN 组的 LUN 或快照。a. 根据业务需求，在 “可选 LUN”或“可选快照 ”区域，勾选一个或多个 LUN 或快照。说明：为方便快速定位LUN，可勾选对话框左下角

18、的“仅显示未归属于LUN 组的 LUN”。9b. 单击 “向右箭头 ”，将 LUN 或快照添加到 “已选 LUN”或 “已选快照 ”区域。确认创建 LUN 组的操作。.单击 “确定 ”。系统弹出 “执行结果 ”对话框，提示操作成功。a. 单击 “关闭 ”。创建主机在安装有本厂商提供的多路径软件，可将已扫描的主机加入到主机列表中，以便节约时间。操作步骤1. 开启自动扫描主机功能。a.在右侧导航栏上，单击。b.在左侧主机管理界面，单击“主机 ”。c. 单击 “参数设置 ”。系统弹出 “设置自动扫描 ”对话框。d. 选择 “启用 ”并单击 “确定 ”。系统弹出 “成功 ”提示框，提示操作成功。e.

19、单击 “确定 ”。2. 选择 “创建 > 自动扫描 ”。系统弹出 “确认 ”对话框。3. 单击 “确定 ”，执行自动扫描主机操作。系统进行自动扫描，被发现的主机将自动加入到主机列表。4. 单击 “关闭 ”，完成自动创建操作。创建主机组为方便同时管理多个主机，可以在逻辑上将多台主机构成一个主机组。操作步骤1. 进入 “创建主机组 ”对话框。a.在右侧导航栏上，单击。b.在左侧主机管理界面，单击“主机 ”。10系统进入 “主机 ”界面。c. 选择 “主机组 ”页签。d. 单击 “创建 ”。系统弹出 “创建主机组 ”对话框。2. 设置主机组的参数。3. 选择要添加到主机组的主机。a. 根据业务

20、需求，在 “可选主机 ”区域，勾选一个或多个主机。说明：当添加主机组时，若多个主机不属于同一集群，可能导致数据访问冲突，造成数据丢失。b. 单击 “向右箭头 ”，将主机添加到 “已选主机 ”区域。确认创建主机组的操作。. 单击 “确定 ”。系统弹出 “提示 ”对话框。说明当只选择一个主机时，单击“确定 ”，系统弹出 “执行结果 ”对话框。a. 单击 “确定 ”。系统弹出 “执行结果 ”对话框，提示操作成功。b. 单击 “关闭 ”。安装仲裁软件介绍仲裁软件的安装。软件包名称为“OceanStor QuorumServer V300R003C00.zip”。登录 http:/，在如下路径获取相应的

21、软件：“服务支持>软件下载> IT > 存储 > 统一存储 > 中端存储”。通过 SSH登录仲裁服务器（如：xshell、 putty等），此处以SUSE系统仲裁软件的安装为例进行说明。操作步骤1. 安装包解压a. 在仲裁服务器的 OS模式下执行 tar -xvf 命令解压压缩包。XXXLinux:# tar -xvf OceanStor QuorumServer VXXXRXXXCXX.zippackage/11package/install.shpackage/packages/package/qs_version.inipackage/tools/b. 解压

22、完成后，执行 cd package 命令进入解压后的目录。XXXLinux:# cd package/2. 安装仲裁软件a.执行 ./install.sh 命令进行安装，此时系统提示输入root 用户的密码。说明软件安装需要获取root 用户的授权才能执行，所以此处需要输入root 用户的密码。b. 输入 root 用户的密码后，系统提示是否需要创建新用户。输入 y，会显示一个默认的普通用户，如果不需要修改，则继续输入密码即可，然后开始软件的安装。XXXLinux:# ./install.shWe trust you have received the usual lecture from t

23、he local SystemAdministrator. It usually boils down to these three things:#1) Respect the privacy of others.#2) Think before you type.#3) With great power comes great responsibility.root's password:Verify the QuorumServer existence.The QuorumServer is not installed.The current user is the testUs

24、er user. Will you create an adminstrator account for the quorum server?<Y|N>:yyquorumsvrUse current account testUser.Installing the quorum server.Preparing. # 100%1:QuorumServer # 100% Notice No old configuration need to resume. root's password:QuorumServer install success completed.c. 步骤

25、3 （可选）安装后检查1.100%ps -elf |grep quo*2. “ ./bin/quorum_serverd ” XXXLinux:# ps -elf |grep quo*0 S testUser 7013 1 0 80 0 - 3700 wait 22:56 ?0 S testUser 7021 7013 0 80 0 - 22958 - 22:56 ?0 S testUser 7232 6394 0 80 0 - 2452 pipe_w 22:57 pts/0 00:00:00 /bin/sh /opt/quorum_server/bin/quorum_server_monit

26、or.sh00:00:00 ./bin/quorum_serverd00:00:00 grep quo*- 结束12配置仲裁软件操作步骤配置前，请确保仲裁服务器已经配置好业务IP 和防火墙。a. 打开仲裁软件的 CLI 页面在仲裁服务器的 OS 模式的任意目录下，执行 qsadmin 命令打开仲裁软件，此时系统进入到仲裁软件页面。XXXLinux:# qsadminstart main!Waiting for connecting to server.admin:/>b.配置仲裁服务器的业务IP 及端口号在仲裁软件的 CLI 页面下执行 add server_ip 命令， 将仲裁服务器的

27、业务 IP 和软件监听的端口号加入到仲裁软件里面进行管理。Command executed succesfully.- 结束检查 License操作步骤a. 选择“ 设置 > License 管理”。b. 浏览已激活 License 信息。在左侧导航中，选择“已激活License”节点。在中间信息展示区，浏览存储设备已激活的License 文件信息。- 结束增加远端设备通过该操作，建立本端设备和远端设备之间的逻辑连接，用于设备之间的数据传输。本端设备和远端设备之间的链路有FC和 iSCSI 两种类型。远端设备的类型有以下两种。复制：用于创建远程复制、LUN拷贝、双活和一体化备份的远端设备

28、。13异构：用于管理异构存储系统提供的存储资源的远端设备。操作步骤a.选择“数据保护> 远端设备”。b. 单击“增加远端设备” 。系统弹出“增加远端设备向导”对话框。c. 选择远端设备类型，并设置连接远端设备的链路。如果已添加的链路的“运行状态”为“失效” ，则需要删除该链路，并重新进行添加。如果本端设备和远端设备的版本不一致，则需要在版本较新的设备侧执行增加远端设备操作，否则可能会导致增加失败。如果本端设备和远端设备的版本一致，需要使用机机帐户进行鉴权认证。机机帐户用户名默认为 mm_user，密码为 mm_userstorage。如果本端设备和远端设备的版本不一致，需要使用旧版本远端

29、设备的超级管理员或管理员帐户进行鉴权认证。d. 单击“下一步” ，系统显示汇总信息。e. 单击“完成” 。系统弹出“执行结果”提示框，提示操作成功。f. 单击“关闭” 。- 结束创建仲裁服务器通过本操作， 可以为双活域创建第三方的仲裁服务器。当双活 Pair的阵列间出现通信异常时，仲裁服务器可以决定该由哪一站点继续为业务提供服务，从而最大程度提高业务的连续性。前提条件：仲裁服务器已与双活Pair 的阵列间建立物理连接，且通信正常。为保证仲裁服务器与双活阵列间链路的可靠性，建议您至少为阵列的每个控制器到仲裁服务器之间添加一条链路。操作步骤a. 选择“ 数据保护 > 双活 > 仲裁服务

30、器” 。b. 单击“创建” 。系统弹出“创建仲裁服务器”对话框。14c.设置仲裁服务器的“名称”和“描述”，并单击“下一步” 。说明：名称长度为1 31 个字符。名称只能包含字母、数字、“ _”、“ -”、“ .”和中文字符。d. 步骤 4 设置连接仲裁服务器的属性，并单击下一步。e. 可选 : 勾选“现在不配置” ，可以不配置仲裁服务器与阵列的控制器间的链路。说明：若不配置仲裁服务器的链路，则仲裁服务器与两端阵列无法建立通信，当阵列间通信异常时，业务将由优先站点提供服务。后续也可以添加仲裁服务器。f. 选择需连接的阵列的“控制器”和“端口”，并单击“增加” 。g. 步骤 7 单击“下一步”

31、。- 结束创建双活域当配置了远端设备和仲裁服务器后，您需要将远端设备、仲裁服务器与本端设备创建为一个双活域。在创建双活时，您可以通过双活域，判断出不同的本端设备、远端设备及仲裁服务器（可选）关系。前提条件：系统已增加至少一个远端设备。一个双活域最多支持创建一个仲裁服务器。操作步骤a. 选择“ 数据保护 > 双活 > 双活域”。b. 单击“创建” 。系统弹出“创建双活域”向导。c. 设置双活域的“名称”和“描述” ，并单击“下一步” 。d. 在“远端设备”区域，选择需要加入到双活域的远端设备，并单击“下一步”。e. 在“仲裁服务器”区域，选择需要加入到双活域的仲裁服务器，并单击“下一

32、步”。说明：若勾选“现在不配置” ，则不在双活域中加入仲裁服务器。双活域中的本、远端设备在故障时无法利用仲裁服务器提供的仲裁机制判断继续提供服务的站点。业务将默认由设置为业务优先站点的设备提供服务。f.在“信息汇总” 界面，确认已选择的远端设备及仲裁服务器（可选） 信息，并单击 “完成”。- 结束15创建双活通过指定双活域 （指定本远端设备及仲裁服务器） ，两端的设备资源及数据同步的属性， 可以创建针对两端设备的双活关系。实现两端设备的双活后，当灾难发生时，双活提供的仲裁及优先站点机制可以为业务判断出继续提供服务的站点，最终实现较少的数据丢失和业务中断。前提条件：两端设备能够正常通信且系统工作

33、正常，本端和远端设备必须支持双活特性。操作步骤a. 选择“ 数据保护 > 双活 > 双活”。b. 选择“双活”页签。系统进入“双活”管理界面。c. 单击“创建” 。系统弹出“创建双活向导”对话框。d. 选择创建双活的“双活域” ，并单击“下一步” 。e.在“可选本端资源”和“可选远端资源”处选择需双活的本端和远端LUN，并单击“增加到 Pair 列表”。f. 单击“下一步” 。g. 设置双活的同步属性，恢复策略建议使用“自动”。初始同步本、 远端的数据初始同步方式。 如果 pair 中的 LUN均没有映射给主机， 均无数据，建议选择“本端、远端数据一致，创建完成后不需要同步”。h. 步骤 8 单击“下一步” 。系统进入“信息汇总”页面。i. 确认创建的双活信息，并单击“完成” 。j. 勾选“我已阅读上述信息，了解执行此操作带来的后果。”，并单击“确定” 。- 结束（可选）创建端口组您可以通过创建端口组并将其加入到映射视图， 以便指定 LUN 组中的 LUN 与主机组对应的主机使用特定的端口进行通信，否则将采用随机分配的可用端口进行通信。本次交付不涉及该内容，没有进行端口限制。操作步骤1. 进入 “创建端口组 ”界面。16a.在右侧导航栏上，单击。b. 单击 “主机端口 ”。c. 选