V3双活实施方案

1、iXXXX局点双活项目实施手册修订记录ii日期修订 版本修改早节修改描述者2015-10-1501初稿完成谢丰目录iii1前言.错误！未定义书签1.1文档背景. 错误！未定义书签。1.2术语定义 . 错误！未定义书签。2交付实施方案.错误！未定义书签2.1实施总体架构 . 错误！未定义书签。2.2IP 地址需求 . 错误！未定义书签。2.2.1阵列地址需求.错误！未定义书签。2.2.2仲裁虚拟机地址需求.错误！未定义书签。3双活实施部署.错误！未定义书签3.1存储配置方案 . 错误！未定义书签。3.1.1存储软件版本 . 错误！未定义书签。3.1.2License 许可. 错误！ 未定义书签。

2、3.1.3存储端口划分 . 错误！未定义书签。3.1.4HyperMetro 数据同步参数设置.错误！未定义书签。3.2多路径配置.错误！未定义书签。3.3阵列配置操作 . 错误！未定义书签。3.3.1登录 DeviceManager. 错误！未定义书签。3.3.2创建硬盘域 . 错误！未定义书签。3.3.3创建存储池 . 错误！未定义书签。3.3.4创建 LUN. 错误！未定义书签。3.3.5创建 LUN 组. 错误！未定义书签。3.3.6创建主机 . 错误！未定义书签。3.3.7创建主机组 . 错误！未定义书签。3.3.8安装仲裁软件 . 错误！未定义书签。3.3.9配置仲裁软件 . 错误

3、！未定义书签。3.3.10检查 License. 错误！ 未定义书签。3.3.11增加远端设备 . 错误！未定义书签。3.3.12创建仲裁服务器 . 错误！未定义书签。iv3.3.13创建双活域 . 错误！未定义书签。3.3.14创建双活 . 错误！未定义书签。3.3.15（可选）创建端口组 . 错误！未定义书签3.3.16创建映射视图 . 错误！未定义书签11 前言1.1 文档背景此文档用于指导搭建xxxx局点双活容灾方案交付和维护。1.术语定义术语表术语描述Active-Active双活GEGigabytes Ether netHyperMetro华为存储双活功能22 交付实施方案2.1

4、实施总体架构方案总体架构生产甘列OceajiStoLSSQOVJ生产阵列oceansjaSMOVJ双活数据中心a.阵列间使用4条光纤链路进行数据同步，同时也是阵列间心跳链路，A、B控并行相连，各2条链路。b.阵列与主机间链路为GE链路，阵列每个控制器有2个端口与主机相连，提供前端业务。b.IP 地址需求2.2.1 阵列地址需求存储IP端口掩码DC1存储管理端口IP10.119.255.175255.255.255.0DC1存储业务端口IP172.16.8.100/101/102/103255.255.255.0DC1存储仲裁端口IP172.16.9.100/101255.255.255.0DC

5、1存储管理端口IP10.119.255.176255.255.255.0DC1存储业务端口IP172.16.8.104/105/106/107255.255.255.0DC1存储仲裁端口IP172.16.9.102/103255.255.255.03222 仲裁虚拟机地址需求仲裁虚拟机IP端口仲裁虚拟机172.16.9.1043 双活实施部署3.1 存储配置方案硬盘域规划DiskDomain 名 称 磁盘数量磁盘类型磁盘容量（TB）备注DC1_DiskDoma in 25SAS1.2用于 VMwarevSphere 5.5DC2_DiskDoma in 25SAS1.2用于 VMwarevSp

6、here 5.5POOLPOOL 规划P001 名称RAID 策略热备策略预期容量（T）磁盘数 量 备注DC1_StoragePoolSAS : raid5(8D+1P高20.5425DC2_StoragePoolSAS : raid5(8D+1P高20.5425LUNLUN 规戈 U U：POOLLUN 名称（生产中心）LUN_IDLUN 类型归属控制器容量DC1_StoragePoolDC1_VMWare_LunOOOO0Thick0A4TBDC1 VMWare Lu n00011Thick0B4TBDC1_VMWare_Lu n00022Thick0A4TBDC1_VMWare_Lu n

7、00033Thick0B4TBDC1 VMWare Lu n00044Thick0A3TBDC2 S DC2 VMWare Lu n00000Thick0A4TB4toragDC2_VMWare_LunOOO11ThickOB4TBePoolDC2_VMWare_LunOOO：22ThickOA4TBDC2_VMWare_LunOOO：33ThickOB4TBDC2_VMWare_LunOOO,44ThickOA3TB3.1.1 存储软件版本部件类型版本存储阵列OceanStor V3V300R003C00多路径软件UltraPathV100R008C20a.Lice nse 许可使用设备sn

8、号和合同号向华为license中心申请license发放，hypermetro的license为纸件license。3.1.3 存储端口划分端口遵守以下规则：1端口用途主要分三类：主机应用端口、双活数据同步端口以及仲裁端口。这三类端口在方案中相互独立， 不共用。站点阵列端口需求（每个控制器）连接阵列DC1_Storage2DC2_Storage平行组网是华为双活推荐的复制链路的组网方式，所谓平行组网从概念上理解就是 全互联交叉处理。平行组网示意图：主从端阵列归属控制器一致。3这样可以防止归属控制器为A控的LUN,数据同步链路在从端B控接收10,导致通过内部通道转发一次,降低性能。建议在引擎上均

9、匀分布复制链路。A、B控之间链路不作53.1.4 HyperMetro 数据同步参数设置参数设置参数名称参数说明配置建议同步速率数据同步的速率，包括：低中高最快当前环境中使用“最快”恢复策略系统故障，远程复制的Pair进入断开状态。当存储系统 从故障中恢复以后，采取的 恢复方式，包括：芋动”Pair进入待恢复”状态，需 要管理维护人员根据情况手动对远程 复制一致性组进行 同步”操作，使一 致性组中所有成员复制的主LUN和从LUN数据进行同步。自动”Pair进入同步”状态，系统 根据一致性组中所有成员复制的主LUN和从LUN的状况，自动将有差异 的数据增量同步到LUN中。建议使用自动”模式1.多

10、路径配置设置多路径工作模块为负载均衡：a.将阵列双活LUN映射至ESX主机后，查询阵列id。esxcli upadm show diskarrayb.设置负载均衡。esxcli upadm set hypermetro work in gmode -m bala nee -p array_idArray_id 为 show diskarray 查询出来的 id。-p 指优先阵列。2.阵列配置操作3.3.1 登录 DeviceManager操作步骤6c.在维护终端运行In ternet Explorer。d.在地址栏中输入 “.XXX:808并按“En ter。”系统进入DeviceMa nag

11、er登录界面。说明:o 浏览器可能会提示网站的安全证书有问题，此时只要确认IP地址正确，您仍然可以选择忽略该提示并继续访问存储系统。在 用户名”和 密码”中输入登录的用户名和密码。说明:o 当出现 验证码”时请输入正确的验证码。o 若您连续输入密码错误次数达到系统密码策略设置”中的 错误次数”，系统自动锁定您的帐号，并在锁定时间结束后解锁。单击登录”。3.3.2 创建硬盘域硬盘域的硬盘类型决定了存储池可以创建的存储层级，为了构建存储池需要首先创建硬盘域，在硬盘 域中需要指定构成硬盘域的硬盘类型和数量。操作步骤b.进入 创建硬盘域”对话框。1.在右侧导航栏上，单击2.单击硬盘域”。3.单击创建”

12、。系统弹出 创建硬盘域”对话框。c.设置硬盘域的名称和描述。a.在名称文本框中输入待创建硬盘域的名称。b.在 描述”文本框中输入待创建硬盘域的用途、属性等，用于标识该硬盘域。d.设置组成硬盘域的硬盘信息。a.选择相应的存储层的硬盘。b.设置该存储层中的硬盘个数说明：对于仅支持SSD盘（高性能层）的存储系统，在创建硬盘域时不存在选择硬盘类型 （存储层）的操作。创建硬盘域时，如果用户规划中明确需要在该硬盘域中创建含有RAID 10级别的存储池，建议为硬盘域的每个存储层手动选择硬盘，且每个存储层中归属于同一个引擎下的硬盘数为偶数，从而保证RAID 10级别存储池的可靠性。7e.单击确定”。系统弹出操

13、作成功提示信息。f.单击确定”完成硬盘域创建。3.3.3 创建存储池应用服务器使用的存储空间来自于存储系统的存储池，因此，为保障应用服务器能够使用存储系统的 存储空间，需要首先创建存储池。操作步骤2.进入 创建存储池”对话框。a.在右侧导航栏上，单击。b.在左侧资源分配管理界面的查看与管理”区域，单击存储池”。系统进入存储池”界面。c.单击创建”系统弹出 创建存储池”对话框。3.设置存储池的名称和描述。a.在名称”文本框中输入待创建存储池的名称。b.在描述文本框中输入待创建存储池的用途、属性等，用于标识该存储池。4.在 硬盘域”中选择待加入的硬盘域。5.在存储介质”中选择存储池中需要的存储层并

14、设置相关参数。1.根据实际业务需求选择相关存储层。2.设置存储层的基本信息。说明：对于仅支持SSD盘（高性能层）的存储系统，在创建存储池时不存在选择存储介质（存储 层）的操作。当存储池由多个存储层组成时，建议设置SmartTier策略，保证不同热度的数据在不同性能的存储层间转移，使存储性能的分配得到优化。6.执行存储池创建操作。a.单击确定”系统弹出执行结果”对话框，提示操作成功。b.单击关闭”完成存储池的创建。3.3.4 仓 U 建 LUN成功创建存储池后，存储池的存储空间不能被主机识别。只有将存储池中的存储空间划分为多个逻辑 单元（LUN）,并将LUN映射给主机后，主机才能使用分配给它的存

15、储空间。操作步骤8a.进入创建LUN对话框。fi1.在右侧导航栏上，单击产2.单击 “LUN3.单击创建”。系统弹出创建LUN对话框。b.设置LUN的参数。相关参数说明如下表所示。LUN参数参数名称参数说明参数设置名称新创建LUN的名称。取值范围o 名称不能重复。o 只能包含字母、数字、“、 ”“二“”和中文字符。o 长度为131个字符（1个中文 字符占3个字符长度）。起始IDLUN的ID。说明：o 系统默认为新创建的LUN自动分配 一个ID。o 如果需要手动设置LUN ID,请取消 选择 自动分配”后手动输入ID。o 创建单一LUN时，您输入的值为该LUN的ID。o 批量创建LUN时，系统从

16、您输入的 值开始为LUN自动分配一个ID。容量LUN的容量。o 当启用SmartThin功能时，此容量为 分配给thin LUN使用的最大容量。即后续 系统动态分配给thin LUN的存储资源的 总容量不能超过此值。o 当不启用SmartThin功能时，此容量 为一次性分配给thick LUN使用的容量。取值范围o 创建thick LUN的最大容量小于等 于所在存储池的可用容量。o创建thin LUN的最大容量小于等 于系统规格。使用所属存储池全 部空闲容量勾选该参数后，系统会将所有空闲存储空 间都分配给该LUN。初始分配容量初始状态实际分配给thin LUN的容量。 启用SmartThin后

17、，该参数有效。取值范围othin LUN的初始分配容量小于等 于所在存储池的可用容量。othin LUN的初始分配容量小于等 于该LUN分配的容量。9数量批量创建的LUN数量，可以根据需要在 文本框中输入LUN的数量。取值范围10说明：o 批量创建的LUN的容量都是相同 的。o 批量创建的LUN的总容量小于等于 当前所属存储池的可用容量。1100手动扌曰疋后缀编号当创建多个LUN时，系统会根据数量自 动在输入的名称后增加后缀编号以示区 分。选择此选项后，您可以手动设置起始 后缀编号。说明：如果不选择此选项，系统默认起始后缀编 号为0000。起始编号系统从您设置的起始编号开始，自动在输入的名称后

18、增加后缀编号以示区分。所属存储池o 选择创建LUN所属的存储池。o 如果系统不存在存储池，可以单击 创建进行存储池的创建。确认创建LUN的操作。.单击确定”系统弹出执行结果”对话框，提示操作成功。a.单击关闭”3.3.5 创建 LUN 组为方便同时管理和映射多个LUN，可以在逻辑上将多个LUN构成一个LUN组。操作步骤3.3.9进入 创建LUN组”对话框。a.在右侧导航栏上，单击b.单击 “LUINc.选择“LUI组”页签。d.单击创建”。系统弹出创建LUN组”对话框。3.3.10设置LUN组的参数。选择要添加到LUN组的LUN或快照。a.根据业务需求，在 可选LUN或可选快照”区域，勾选一个

19、或多个LUN或快照。 说明：为方便快速定位LUN,可勾选对话框左下角的 仅显示未归属于LUN组的LUN。11a.单击向右箭头”，将LUN或快照添加到 已选LUN或已选快照”区域。 确认创建LUN组的操作。.单击确定”。系统弹出执行结果”对话框，提示操作成功。a.单击关闭”。3.3.6 创建主机在安装有本厂商提供的多路径软件，可将已扫描的主机加入到主机列表中，以便节约时间。操作步骤a.开启自动扫描主机功能。a.在右侧导航栏上，单击畠。b.在左侧主机管理界面，单击主机”。c.单击参数设置”。系统弹出设置自动扫描”对话框。d.选择 启用”并单击 确定”。系统弹出 成功”提示框，提示操作成功。e.单击

20、确定”。b.选择创建自动扫描”。系统弹出确认”对话框。c.单击 确定”，执行自动扫描主机操作。系统进行自动扫描，被发现的主机将自动加入到主机列表。d.单击 关闭”，完成自动创建操作。3.3.7 创建主机组为方便同时管理多个主机，可以在逻辑上将多台主机构成一个主机组。操作步骤进入创建主机组”对话框。a.在右侧导航栏上，单击b.在左侧主机管理界面，单击主机”。1.12系统进入主机”界面。b.选择主机组”页签。c.单击创建”系统弹出 创建主机组”对话框。1.设置主机组的参数。2.选择要添加到主机组的主机。a.根据业务需求，在 可选主机”区域，勾选一个或多个主机。说明：当添加主机组时，若多个主机不属于

21、同一集群，可能导致数据访问冲突，造成数据丢失。b.单击向右箭头”将主机添加到已选主机”区域。 确认创建主机组的操作。.单击确定”系统弹出提示对话框。说明当只选择一个主机时，单击确定”系统弹出 执行结果”对话框。a.单击确定”系统弹出执行结果”对话框，提示操作成功。b.单击关闭”3.3.8 安装仲裁软件介绍仲裁软件的安装。软件包名称为 “OceanStor QuorumServer V300R003C00.zip” 登录，在如下路径获取相应的软件：“服务支持软件下载 IT 存储统一存储中端存储”。通过SSH登录仲裁服务器（如：xshell、putty等），此处以SUSE系统仲裁软件的安装为例进行

22、 说明。操作步骤2.安装包解压a.在仲裁服务器的OS模式下执行tar -xvf命令解压压缩包。XXXLinux# tar -xvf OceanStor QuorumServer VXXXRXXXCXX.zippackage/package/install.shpackage/packages/13package/packages/QuorumServer-VXXXRXXXCXX-linux.x86_64.rpmpackage/qs_version.inipackage/tools/b.解压完成后，执行cd package命令进入解压后的目录。XXXLinux# cd package/3.安装仲

23、裁软件a.执行./install.sh命令进行安装，此时系统提示输入root用户的密码。U说明软件安装需要获取 root 用户的授权才能执行，所以此处需要输入root 用户的密码。b.输入root用户的密码后，系统提示是否需要创建新用户。输入y，会显示一个默认的普通用户，如果不需要修改，则继续输入密码即可，然后开始 软件的安装。XXXLinux:# ./install.shWe trust you have received the usual lecture from the local SystemAdministrator. It usually boils down to these

24、three things:#1) Respect the privacy of others.#2) Think before you type.#3) With great power comes great responsibility.roots password:Verify the QuorumServer existence.The QuorumServer is not installed.The current user is the testUser user. Will you create an adminstrator account for the quorum se

25、rver?:y输入 y 后，会显示出默认用户名 quorumsvr，然后输入密码，回车。Use current account testUser.Installing the quorum server.Preparing. # 100%1:QuorumServer # 100%Notice No old configuration need to resume.roots password:QuorumServer install success completed.c.步骤3(可选)安装后检查a.当安装进程为 100%寸，可执行 ps -elf |grep quo*命令进行查看安装是否成功

26、。b.当页面显示有“ ./bin/quorum_serverd 时，表示安装成功。XXXLinux:# ps -elf |grep quo*0 S testUser 7013 1 0 80 0 - 3700 wait 22:56 ?0 S testUser 7021 7013 0 80 0 - 22958 - 22:56 ?0 S testUser 7232 6394 0 80 0 - 2452 pipe_w 22:57 pts/000:00:00 /bin/sh /opt/quorum_server/bin/quorum_server_monitor.sh00:00:00 ./bin/quo

27、rum_serverd00:00:00 grep quo*-结束14a.配置仲裁软件操作步骤配置前，请确保仲裁服务器已经配置好业务IP和防火墙。打开仲裁软件的CLI页面在仲裁服务器的OS模式的任意目录下，执行qsadmin命令打开仲裁软件，此时系统进入 到仲裁软件页面。XXXLinux:# qsadminstart main!Waiting for connecting to server.admin:/配置仲裁服务器的业务IP及端口号在仲裁软件的CLI页面下执行add server_ip命令， 将仲裁服务器的业务IP和软件监听的 端口号加入到仲裁软件里面进行管理。admin:/add ser

28、ver_ip ip= port=30002 Command executed succesfully.- 结束b.检查 License操作步骤选择“ 设置 License管理”。浏览已激活License信息。在左侧导航中，选择已激活License”节点。在中间信息展示区，浏览存储设备已激活的Lice nse文件信息。- 结束c.增加远端设备通过该操作，建立本端设备和远端设备之间的逻辑连接，用于设备之间的数据传输。本端设备和远端设备之间的链路有FC和iSCSI两种类型。远端设备的类型有以下两种。复制：用于创建远程复制、LUN拷贝、双活和一体化备份的远端设备。异构：用于管理异构存储系统提供的存储资

29、源的远端设备。15操作步骤选择“ 数据保护远端设备”。单击“增加远端设备” 。系统弹出“增加远端设备向导”对话框。选择远端设备类型，并设置连接远端设备的链路。如果已添加的链路的“运行状态”为“失效” ，则需要删除该链路，并重新进行添加。如果 本端设备和远端设备的版本不一致，则需要在版本较新的设备侧执行增加远端设备操作， 否则可能会导致增加失败。如果本端设备和远端设备的版本一致，需要使用机机帐户进行鉴权认证。机机帐户用户名 默认为mm_use,密码为mm_userstorage。如果本端设备和远端设备的版本不一致，需要使用旧版本远端设备的超级管理员或管理员 帐户进行鉴权认证。单击“下一步” ，系

30、统显示汇总信息。单击“完成” 。系统弹出“执行结果”提示框，提示操作成功。单击“关闭” 。- 结束d.创建仲裁服务器通过本操作， 可以为双活域创建第三方的仲裁服务器。 当双活Pair的阵列间出现通信异常 时，仲裁服务器可以决定该由哪一站点继续为业务提供服务，从而最大程度提高业务的连 续性。前提条件：仲裁服务器已与双活Pair的阵列间建立物理连接，且通信正常。 为保证仲裁服务器与双活阵列间链路的可靠性，建议您至少为阵列的每个控制器到仲裁服 务器之间添加一条链路。操作步骤选择“ 数据保护双活仲裁服务器” 。单击“创建” 。系统弹出“创建仲裁服务器”对话框。设置仲裁服务器的“名称”和“描述” ，并单

31、击“下一步” 。说明：名称长度为131个字符。名称只能包含字母、数字、“_”、“-”、和中文字符。步骤4设置连接仲裁服务器的属性，并单击下一步。可选:勾选“现在不配置” ，可以不配置仲裁服务器与阵列的控制器间的链路。说明：若不配置仲裁服务器的链路，则仲裁服务器与两端阵列无法建立通信，当阵列间通16信异常时，业务将由优先站点提供服务。后续也可以添加仲裁服务器。选择需连接的阵列的“控制器”和“端口” ，并单击“增加” 。步骤7单击“下一步” 。- 结束e.创建双活域当配置了远端设备和仲裁服务器后，您需要将远端设备、仲裁服务器与本端设备创建为一 个双活域。在创建双活时，您可以通过双活域，判断出不同的

32、本端设备、远端设备及仲裁 服务器（可选）关系。前提条件：系统已增加至少一个远端设备。一个双活域最多支持创建一个仲裁服务器。操作步骤选择“ 数据保护双活双活域”。单击“创建” 。系统弹出“创建双活域”向导。设置双活域的“名称”和“描述” ，并单击“下一步” 。在“远端设备”区域，选择需要加入到双活域的远端设备，并单击“下一步” 。在“仲裁服务器”区域，选择需要加入到双活域的仲裁服务器，并单击“下一步” 。说明：若勾选“现在不配置” ，则不在双活域中加入仲裁服务器。双活域中的本、远端设备 在故障时无法利用仲裁服务器提供的仲裁机制判断继续提供服务的站点。业务将默认由设 置为业务优先站点的设备提供服务

33、。在“信息汇总” 界面， 确认已选择的远端设备及仲裁服务器（可选） 信息， 并单击“完成”。- 结束f.创建双活通过指定双活域 （指定本远端设备及仲裁服务器） ，两端的设备资源及数据同步的属性， 可 以创建针对两端设备的双活关系。实现两端设备的双活后，当灾难发生时，双活提供的仲 裁及优先站点机制可以为业务判断出继续提供服务的站点，最终实现较少的数据丢失和业 务中断。前提条件：两端设备能够正常通信且系统工作正常，本端和远端设备必须支持双活特性。操作步骤a.选择“ 数据保护双活双活”。b.选择“双活”页签。系统进入“双活”管理界面。17单击“创建” 。系统弹出“创建双活向导”对话框。选择创建双活的“双活域” ，并单击“下一步” 。在“可选本端资源”和“可选远端资源”处选择需双活的本端和远端LUN,并单击“增加到Pair列表”。单击“下一步” 。设置双活的同步属性，恢复策略建议使用“自动” 。初始同步本、远端的数据初始同步方式。 如果pair中的LUN均没有映射给主机，均无数据， 建议选择“本端、远端数据一致，创建完成后不需要同步”。步骤8单击“下一步” 。系统进入“信息汇总”页面。确认创建的双活信息，并单击“完成” 。勾选“我已阅