存储系统主机OS双活最佳实践

存储系统AS5300/5500G2

主机OS双活最佳实践

AS53OO/55OOG2主机OS双活最佳实践

尊敬的存储系统用户：

衷心感谢您选用了存储系统！

本手册介绍了本存储系统的技术特性与系统的安装、设置和使用，有助于您更详细地了解和

便捷地使用本款存储系统。

请将我方产品的包装物交废品收购站回收利用，以利于污染预防，造福人类’

拥有木于•册的版权。

未经许可，任何单位和个人不得以任何形式复制本用户手册。保留随时修改本手册的权利。

本手册中的内容如有变动恕不另行通知。

如果您对本手册有疑问或建议，请向电子信息产业股份有限公司垂询。

AS53OO/55OOG2主机OS双活最佳实践

声明

在您正式使用本存储系统之前，请您先阅读以卜声明.只有您阅读了以卜声明并且同意以F

各条款后，方可正式开始使用本存储系统；如果您对以下条款有任何疑问，请和您的供货商

联系或直接与我们联系。如您未向我们就以下条款提出疑问并开始使用本系统，则是默认您

已经同意了以下各条款。

1、我们提醒您特别注意：在任何时候，除r我们提示您可以修改的参数以外，您不要修改

木存储系统主板BIOS中的任何其他参数。

2、在您使用的存储系统出现任何硬件故障或您希望对硬件进行任何升级时，请您将机瑞的

详细硬件配置反映给我们的客户服务中心;您不要自行拆卸存储系统机箱及机箱内任何硬件

设备。

3、本存储系统的内存、CPU、CPU散热片、风扇、硬蓝托架、硬盘等都是特殊规格的，请

您不要将它们和任何其他型号机器的用应设备混用。

4、您在使用存储系统过程中遇到的任何软件问题，我们希望您苜先和相应软件的提供商联

系，由他和我们联系，以方便我们沟通、共同解决您遇到的问题。对于如数据库、网络管理

软件或其他网络产品等的安装、运行问题，我们尤其希望您能够这样处理。

5、如果上架安装本存储系统，请先仔细阅读相关产品手册中的快速安装指床。致力于产品

功能和性能的持续提升,这可能导致部分功能及操作与手册描述有所差异，但不会影响使用，

如果您有任何使用疑难问题，请与我们的客户服务中心联系。

6、我们特别提醒您：在使用过程中，注意对您的数据进行必要的备份。

7、此为A级产品，在生活环境中，该产品可能会造成无线电干扰。在这种情况下，可能需

要用户对其干扰采取切实可行的措施.

8、请仔细阅读并遵守本手册的安全细则。

9、本手册中涉及的各软、硬件产品的标识、名称版权归产品的相应公司拥有。

10、以上声明中，“我们”指代电子信息产业股份有限公司：电子信息产业股份有限公司拥

有对以上声明的最终解释权。

AS53OO/55OOG2主机OS双活最佳实践

安全细则

1、本系统中的电源设备可能会产生高电压和危险电能，从而导致人身伤害。请勿自行卸卜

主机盖，并拆装、更换系统内部的任何组件，除非另外得到的通知，否则只有.经过培训的维修

技术人员才有权拆开主机盖及拆装、更换内部组件。

2、请将设备连接到适当的电源，仪可使用额定输入标签上指明的外部电源类型为设备供电，

为保护您的设备免受电乐瞬间升高或降低所导致的损坏，话使用相关的稳压设备或不间断电

源设备。

3、如果必须使用延长电缆，诗使用配有正确接地插头的三芯电缆，并查看延长电缆的额定

值，确保插入延长电缆的所有产品的额定电流总和不超过延长电缆额定电流限制的仃分之八

十。

4,请务必使用随机配备的供电组件如电源线、电源插座（如果防机配备）等，为了设备及

使用者的安全，不要随意更换电源电缆或插头。

5、为防止系统漏电造成电击危险，务必将系统和外国设备的电源电缢插入已正确接地的电

源插座。请将3芯电源线插头插入接地良好、伸手可及的3芯交流电源插座巾，务必使用电

源线的接地插脚，不要使用转接插头或拔下电缆的接地插脚，在未安装接地导线及不确定是

否已有适当接地保护的情况下，请勿操作使用本设备，可与电工联系咨询。

6、切勿将任何物体塞入系统的开孔处。如果塞入物体，可能会导致内部组件短路而引起火

灾或电击。

7,请将系统置于远离散热片和有热源的地方，切勿堵塞通风孔。

8、切勿让食物或液体散落在系统内部或其它组件上，不要在高潮湿、高灰尘的环境中使用

产品。

9、用错误型号的电池更换会有爆炸危险，需要更换电池时，请先向制造商咨询并使用制造

商推荐型号相同或相近的电池，切勿拆开、挤压、剌戳电池或使其外部接点短路，不要将其

丢入火中或水中，也不要暴露在温度超过60摄氏度的环境中，请勿尝试打开或维修电池，

务必合理处置用完的电池，不要将用完的电池及可能包含电池的电路板及其它组件与其它废

品放在起，疔关电池回收请与当地废H回收处理机构联系。

AS53OO/55OOG2主机OS双活最佳实践

版本控制

文档版本1.0

第一次正式发布”

AS53OO/55OOG2主机OS双活最佳实践

目录

声明........................................................................ii

安全细则.....................................................................iii

版本控制.....................................................................iv

目录........................................................................v

1存储双活(InMetro)......................................................................................................................1

1.1InMeiro概览..........................................................1

1.1.1InMetro功能与应用场毋..........................................1

1.1.2InMeiro架构....................................................1

1.1.3约束与限制....................................................2

1.1.4优势..........................................................3

1.2InMetro设计需要考虑的点..............................................3

1.2.1InMetro配置...................................................4

1.2.2光纤通道距岗设宜..............................................15

1.3InMetro实施需要考虑的点.............................................16

1.3.1规划注意事项.................................................)6

1.3.2配置注意事项..................................................19

1.3.3配置完成验证方法.............................................22

1.4InMetro故障场景及恢复方案...........................................23

1.4.1故障场景及恢复方案...........................................23

1.4.2故障切换.....................................................25

2Hyper-v双活最佳实践.....................................................26

2.1组网架构............................................................26

2.2优势................................................................28

2.3规划................................................................28

2.4集群配置............................................................29

2.4.1Hyper-v集群部署步骤...........................................29

2.4.2环境配置前提条件及注意事项...................................30

2.4.3配置建议.....................................................31

2.5故障场景及恢史方案测试结果.........................................32

2.5.1测试计划的故障转移...........................................32

2.5.2测试非计划的故障转移.........................................32

2.5.3测试存储双活.................................................32

3OracleRac双活最佳实践...................................................33

3.1组网架构............................................................33

3.2优势................................................................34

3.3规划................................................................34

331OniclcRAC节点信息规划.......................................34

AS53OO/55OOG2主机OS双活最佳实践

3.3.2磁盘规划.....................................................35

3.4集群配置...........................................................35

3.4.1部署OracleRAC步骤...........................................35

^^•,1Hf.J,I(■xiy'>■■■■■■■■■>>■■■■■•■■■«(■■■■■■«■■■•■■■■•■■■■■■•■■■•■■■■■■■>■■>■■■■■■■■••■■■■■■■■■>>■■■■■•■■■3^^

3.5.1测试负载均衡LoadBalance..................................................................................40

3.5.2测试Failover...........................................................................................................42

3.5.3测试存储双活.................................................44

4VMwarevMSC双活最佳实践...............................................45

4.1组网结构............................................................45

42俏油46

4.3部署要求............................................................46

4.3.1ESXI主机总线适配器要求......................................47

4.3.2设置最大的Lunnumber值......................................47

4.3.3路径选择策略.................................................47

4.3.4无效路径的路径故障转移.......................................48

4.3.5VMware分布式资源调度........................................49

4.3.6命名约定.....................................................49

4.3.7延时时间检查.................................................51

4.4VMwareHA..........................................................................................................................51

4.4.1HA准入控制..................................................51

4.4.2HA心跳检测..................................................52

4.4.3HA高级设置..................................................53

4.4.4增强的所有路径下降检测(APD)...................................................................53

4.4.5永久性设备丢失(PDL).....................................................................................53

4.4.6虚拟机组件保护(VMCP)......................................................................................54

4.4.7存储故障检测流程.............................................57

4.5ESXI双活故障场景..................................................57

4.5.1单ESXI主机故障..............................................57

4.5.2单站点存储故障...............................................58

4.5.3存储上的某卷永久故障.........................................59

4.5.4单站点主机全面故障...........................................60

4.5.5单站点主机和存储全面故障.....................................60

456单存储跖径故障................................................61

4.5.7InMetro中，仲裁站点路径故障..................................62

5华为FusionSphere.........................................................................................................................64

5•1Jk1•Jk■FXC-•・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・♦・・・・・・・・・・・・・・・♦・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・6・・4•

5.1.2ISCSI....65

AS53OO乃S00G2主机OS双活最佳实践

5.2组网架构...............................................................69

5.3优势...................................................................70

5.4故障场景...............................................................70

5.4.1单存储站点故障..................................................70

5.4.2单存储路径故障..................................................71

5.4.3InMeiro中，仲裁站点路径故障....................................72

6总结........................................................................74

7术语&缩略语................................................................75

AS53OO/55OOG2主机OS双活最佳实践

1存储双活（InMetro）

1.1InMetro概览

1.1.1InMetro功能与应用场景

InMetro高可用性功能，可以在硬件故障、电源故障、连接故障或火灾、洪水等白

然灾害发生时，保证业务的连续性。

在可长达300公里的距离提供两个站点都可访问的高可用卷，如果任一站点的节

点或存储设备脱机，另•联机的站点保持最新的数据,InMeiro自动实现故障转移，

访问联机的副本.当故障恢夏后，InMetro实现自动重新同步两份副本。

InMetro适用于业务不可中断，对业务连续性要求较高和可靠性要求较高，支持多

种场景故障的应用场景，具体可以支持以下维护或故障场景：

•存储维护（在线/离线）

•站点维护

•数据在线迁移

•存储故障（计划内/计划外）

•站点故障（计划内/计划外）

1.1.2InMetro架构

•主机、节点、存储都有Si〔e概念，应用从本地站点上的节点/存储获取I/O资

源。

•每个提供I/O访问服务的数据卷由四个卷组成（1Master/1AUX/1Mater_CV/l

AUX_CV）o

•正常I/O数据流向从Mastcr->AUX。故障切换时，在AUX卷上模拟LUNID.

从而实现上层应用的透明访问。

AS53OO/55OOG2主机OS双活最佳实践

InMetro架构如下：

图1-1InMetro架构

2酎80。

VC4U

Mc^el，必

Site3

1.1.3约束与限制

InMetro功能可在使用标准多路径驱动程序的各种主机类型上工作，无需额外的主

机支持来访问高可用性卷。多路径驱动程序支持非对称逻辑的元访问（ALU/X）

时，存储系统会向多路径驱动程序通知最接近它的节点以及用于最小化1/O延迟

的节点。用户只需要告诉存储系统与主机连接的站点，系统会配置最佳的主机路

径。推荐使用的多路径驱动软件。

双活存储的功能在使用时的规格限制如卜.表所示。

1-1InMetro规格限制

双活功能使用规格属性数值

每个集群支持的双活关系个数1250

鱼群支持的双活最大容量2PR

单个10Group支持的双活最大容量1PB

多路径最多支挣数曳8条

AS53OO/55OOG2主机OS双活最佳实践

1.1.4优势

•对于应用系统来说，访问MirrorLUN而不需要关心后端的物理存储。

♦当应用系统与数据时，自动将与IO分流到本地和远端的存储系统，数据

实时同步，可以确保任意时间点的数据安全性：

♦当应用系统读数据时，应用系统可以指定访问最近的一台存储系统即可，

可以大大节省两个数据中心之间的网络传输带宽；

♦当存储系统故障时，采用Active-Active技术，可以保证应用实时切换到

容灾中心，而不需要人工操作，保证了业务系统的高可用性，大大缩减了

故障切换时间。

•对于系统的效果。

♦通过数据镜像技术买现r生产阵列/容灾阵列的在线LUN的实时数据一

致，实现双活存储系统。

♦任何一个存储宕机或损坏，不影响主机应用的连续性。

♦用户增减应用形态变得简单有效

♦用户的应用系统可以非常方便的在合并的LUN上建立应用的双机或集群。

•部署快捷

数据双活引擎部署过程无需对现有SAN架构做任何物理层面的更改，只需要

通过FC线缆将引擎端口连接到现有的SAN网络中；通过修改zone配置，即

可完成数据双活架构改造。整个初始化部署过程可在30分钟内完成。

1.2InMetro设计需要考虑的点

主机上多路径程序要支持ALUA(非对称逻辑集元访问)。

理想情况下，用于InMctro桎置的三个故障域中的每一个都在单独的建筑物中，并

有单独的电源供电。虽然这种配置为所有可能的故障和灾难情况提供了最高级别的

保护，俱实际实施过程中也不是必须的，但如果不这样相应就会降低能够保护的级

别。如果没有第三个建筑物，将包含活动仲成磁盘的故障城放在其他两个故障域中

的一个的建筑物里也可以，这种情况卜要遵循以卜规则：

•每个故障域必须由独立电源或不间断电源供电(UPS):

AS53OO/55OOG2主机OS双活最佳实践

•用于活动仲裁磁盘的存储控制器必须与用于客户数据的存储控制器分开：

•每个故障域必须在独立和隔离的存储区域网络上（单独的布线和开关）；

•来自•个故障域的所有.行线（电源，SAN和Intemei协议（IP））不能通过另

一个故障域进行物理路由：

•每个故障域必须放在单独的防火隔间中：

•可以使用不同的方式部署InMetro解决方案

♦每个站点一个I/O组

♦每个站点两个1/0组

♦一个站点两个1/0组，另一个站点一个I/O组

♦一个站点三个12组，另一个站点一个I/O组

实际采用的解决方案可以根据客户端，工作负载和可用性要求而有所不同。

当一个应用程序使用了多个双活卷，需要保持数据•致性时，可以为多个双活卷创

建一致性组。

1.2.1InMetro配置

InMetro配置的节点必须通过FC或FC1P链路相互连接。这些连接提供节点到节

点通信和主机访问控制器节点的路径。InMetro支持在故障域之何进行集群内节

点间通信的三种方法：

•将每个存储节点连接到本地和远程故障域中的FC交换机。因此，所有节点

到节点的流量都可以在不经过交换机间链路（ISL）的情况下进行。这种方法

被称为InMeiroNo1SL配置。

•将每个存储打点只连接到本地FC交换机，并在故隙域之间为节点到节点的流

量配置ISL。这种方法被称为InMetroISL配置。

•将每个存储节点只连接到本地FC交换机，并在故障域之间配捏FCIP以实现

节点到节点的流量。这种方法被称为InMetroFCIP配直。

不使用ISL的故障域之间的最大距离限制在40公里。这个限制是确保可能发生的

I/O流量中的任何突发情况都不使用所有缓冲区到缓冲区（bulTcr-Qbuffcr）（BB）

信用。链路速度也受到节点之间电缆长度的限制。

AS53OO/55OOG2主机OS双活最佳实践

下表列出了每个存储InMeiro配苴支持的距离及其相关版本和端口这度要求。

配置选项AS5300/5500G2版本最大支持距离最大链路速度

NoISL3.1及后续版本<40km2Gbps

ISL3.1及后续版本<300km2,4,8,或16Gbps

FCIP3.1及后续版本<300km2,4,8,或16Gbps

NoISL配置

优势：

•HA解决方案分布在两个独立的数据中心。

•该配置与标准AS53OO/55OOG2类似。

•硬件的支持(Hardwarccffort)是有限的。可以使用WDM设备，但不是必须的。

要求：

•故障域间每个I/O组有四个专用光纤处路(每个I/O组有两个节点，因此需

耍八个链路)。

•存储节点之间不使用ISL,

•被动WDM(passiveWDM)设备可以在故障域之间使用。

•可以在故障域之间使用主动或被动WDMo

•不使用WDM,K:波小型可插拔(Iongwavesmallfcrni-factcrphiggables)(SFPC

需要达到10公里。

•使用WDM,支持的距离可达40公里。

•站点1和站点2之间的两个独立光纤链路必须配置WDM连接，

•第三个故障域需要放置仲裁盘。

•仲裁磁盘存储系统必须通过FC连接。

卜图说明了InMeiroNoISL配置的高级视图。

图1.2NoISL配置

AS53OO/55OOG2主机OS双活最佳实践

zone要求：

无ISL配置的InMetro分区要求与存储标准配置的分区要求相同。

•服务器只能访问存储节点。从服务器到后端存储不存在直接访问。

•为节点到节点流量配置单独的分区。

•除了分区之外，还可以使用端口屏蔽来隔离特定存储节点FC端n上的节点到

节点流量。端口屏蔽功能使用chsysiem-localfcponmask命令启用。

•同一个I/0组的存储节点通过控制柜内部PCI和FC1/0进行通信。

•如果用户虚拟化外部存储，则分区一定不包含多个后端磁盘系统。捋个存储

节点必须使用专用FC端口作为外部存储控制器工作负载。

下图说明r在故障域1和2之间使用被动WDM连接的无ISL配置的存储InMciro。

图1-3NoISL（使用被动WDM）

AS53OO/55OOG2主机OS双活最佳实践

故障域1故障域2

AS530ft/5500G2存储光纤端=1的首选实践

AS53OO/55OOG2可以为每个安装节点提供最多四个8Gbps4端口光纤通道HBA

功能。

•专用两个FC端口进行节点到远程站点节点通信。将这些端口直接连接到远程

站点的交换机。

•使用其他FC端口进行］：机和存储连接.若可能.将存储工作负载与该主机分

离。将这些端口连接到本地的交换机。

•通过使用专用于存储工修负载的相同端口来访问第三个站点仲裁设备。

•在AS5300/5500G2存储，配置专用于节点到节点连接的端口的localfcportmask

值。使用交换机分区确保节点到远程站点通信时使用专用于此目的的两个FC

端口。

ISL配置

这种配置被认为是理想的。存储I/O组跨两个故障域分布，故障域之间的节点到

节点通信通过ISL执行。

使用ISL可将存储InMetro配置支持的距离增加到300公里。尽管最多支持距离为

AS53OO/55OOG2主机OS双活最佳实践

300公里，但主机相关I/O必须多次穿越长距离链路。因此，相关的性能下降可能

超过可接受的范围。为了减少这种可能性，可以将故障城之间的距点限制到150公

里（推荐将故障域之间的距离限制在150公里最小化遇到的响应时间提高而增加

的风险）

优势：

•ISL使故障域之间的距碑可以大于40公里。

•主动和被动WDM设备可以在故障域之间使用。

•使用WDM支持的距离可达300公里。

要求：

•四个必需的专用FC端口，故障域之间每个I/O组的每个巾点使用两个端口。

•使用ISL进行节点到节点通信需要配置两个单独的SAN：

♦一个SAN专用于存储节点到节点通信。该SAN称为私有SAN.,

♦一个SAN专用于主机和存储控制器连接。这个SAN被称为公共SANo

♦每个SAN必须至少有一个用于冗余的ISL,并且由ISL提供的带宽必须

大小正确。

•在存储InMciro中，站点之间的节点到节点通信的最小带宽是两个站点中所有

主机的写入吞吐量峰值。仅当在一个站点的主机访问所有卷时，此带宽是足

够的。在下面这些情况下，InMeir。集群需要站点之间的额外带宽：

a）InMetro卷山不同站点的主机并发访问。

b）不同站点的InMetro卷的两个副本正在同步（初始化或运行中断时的同

步＞。

0主机失去了与本地站点I/O组的所有路径（因此访问远程站点的I/O组）。

由于本地I/O组的两个节点脱机或SAN故障，这种情况可能发生。

场景c需要公共SAN中的额外的站点间带宽。方案a和b在私有SAN中需

要额外的站点间带宽。情景b和c是多次故障或大停机的结果。场景a可能

在正常运行过程中发生。

为了确保在所有工作负载条件下InMetro集群的完美运行，站点之间的节点到

节点通信的带宽需要是这些数字的总和：对于从同一站点中的主机访问的卷的

写入吞吐后峰值，以及从不同的站点的主机并行访问的卷的读取峰值和两倍的

写入吞吐战峰值.

AS53OO/55OOG2主机OS双活最佳实践

•第三个故障域需要放苴仲裁磁盘。

•包含仲裁磁盘的存储控制器必须通过FC连接。

•为节点到仲裁流成保证至少彳j2MB的带宽。

•在故障域之间的连接不超过一个ISL跳。

私有和公共SAN可以通过使用以下任意一个方法来实现：

•每个SAN专用FC交换机

•交换机分区功能

•虚拟或逻辑结构

分M要求：

InMetroISL配置需要私有和公共SAN。必须根据以下规则配置两个SAN：

•每个存储节点的两个端口都连接到私有SAN,

•其他端口连接到公共SAN。

•私有SAN需要一个交换机之间的中继线。

•主机和存储系统连接到公共SAN。

•如果用户虚拟化外部存储，则分区一定不包含多个后端磁盘系统。每个存储

节点必须使用专用FC端口作为外部存储控制器工作负载。

•除了分区之外，还可以使用端口屏蔽来隔离特定存储节点FC蜡口上的节点到

节点流量。端II屏蔽功能使能chsysiein-localfcporlmask命令。

•故障域3(仲裁磁盘)必须连接到公共SAN”

•属于私有SAN的ISL不得与其他流炭共享，并且不得超额认购(oversubscribed)。

存储InMetroISL配置如下图所示。私有和公共SANs在四个物理交换机中的将一

个上都表示为逻辑交换机。

图1-4ISL配置

AS53OO/55OOG2主机OS双活最佳实践

故障域2

故障域1

下图说明了在故障域I和2之间采用主动或被动WDM的存储InMeiroISL配置。

私有和公共SAN在四个物理交换机中的每一个上都表示为逻辑交换机.

图1-5ISL使用主动儆动WDM

AS53OO/55OOG2主机OS双活最佳实践

故障域2

故障域1

AS5300/5500G2存储光纤端口的首选实践

AS5300/5500G2可以为每个安装节点提供最多四个8Gbps4端口光纤通道HBA

功能。

•专用两个FC端口进行节点到远程站点节点通信。将这些端匚直接连接到远

程站点的交换机。

•使用其他FC端口进行主机和存储连接，若可能，将存储工作负载与该主机分

离。将这些端口连接到木地的交换机。

•通过使用专用于存储工作负载的相同端口来访问第三个站点仲祓设备。

•在AS53OO/55OOG2存储,配置专用于节点到节点连接的端口的localfcportmask

值。使用交换机分区确保节点到远程站点通信时使用专用「•此I」的的两个FC

端口。

AS53OO/55OOG2主机OS双活最佳实践

FCIP配置

在此配置中,FCIP链路在故障域之间使用。此配置是描述的ISL配置的一个变体，

因此许多相同的要求也适用。

优势：

FCIP配置使用现有的IP网络进行扩展拒离连接。

要求：

•它需要在故障域之间至少两个FC1P隧道。

•使用ISU进行节点到节点通信需要配苴两个单独的SAN：

♦一个SAN专用于存储节点到节点通信。该SAN称为私有SAN.,

♦一个SAN专用于主机和存储控制器连接。这个SAN被称为公共SANo

♦每个SAN必须至少有一个用于冗余的ISL,弁且由ISL提供的带宽必须

大小正确。

•在存储InMetro中，站点之间的节点到节点通信的最小带宽是两个站点中所有

主:机的写入吞吐量峰值。只有在一个站点的主:机访问所有卷时，此带宽就足

够了。在下面这些情况下，InMeir。集群需要站点之间的额外带宽：

a）InMetro卷山不同站点的主机并发访问。

b）不同站点的InMetro卷的两个副本正在同步（初始化或运行中断时的同

步）。

o主机失去r与木地站点i/o组的所有路径（因此访问远程站点的DO组）。

由于本地I/O组的两个节点脱机或SAN故障，这种情况可能发生。

场景c需耍公共SAN中的额外的站点间带宽。方案a和b在私有SAN中需

要额外的站点间带宽。情母b和c是多次故障或大停机的结果。场景a可能

在正常运行过程中发生。

为了确保在所有工作负载条件下InMetro集群的完美运行，站点之间的节点到

节点通信的带宽需要是这些数字的总和：对于从同一站点中的主机访问的卷的

写入吞吐量峰值，以及从不同的站点的主机并行访问的卷的读取峰值和两倍的

写入吞吐量峰值。

•第三个故障域需要放置仲裁磁盘。

AS53OO/55OOG2主机OS双活最佳实践

•包含仲裁磁盘的存储控制器必须通过FC连接。

•为节点到仲裁流量保证至少有2MB的带宽。

•故障域3（仲裁磁盘）必须是FC或FCIP连接。如果是FCIP连接，到仲裁磁

盘的响应时间不能超过80ms。

•包含仲裁磁盘的存储控制器必须是FC或FCIP连接。

•在故障域之间的连接不超过一个ISL跳。

私有和公共SAN可以通过使用以下任意一个方法来实现：

•每个SAN专用FC交换机

•交换机分区功能

•虚拟或逻辑结构

分区要求：

InMetroFCIP配置需要私有和公共SAN,必须根据以下规则配置两个SAN：

•每个存储节点的两个端口都连接到私有SAN。

•其他端口连接到公共SAN。

•私有SAN需要一个交换机之间的中维线。

•主机和存储系统连接到公共SANo

•如果用户虚拟化外部存储，则分区一定不包含多个后端磁盘系统。每个存储

节点必须使用专用FC端口作为外部存储控制器工作负载。

•除了分区之外，还可以使用端口屏蔽米隔离特定存储节点FC端口上的节点到

节点流出端口屏蔽功能使能chsystem-localfcportmask命令。

•故障域3《仲裁磁盘）必须连接到公共SAN.

•属于私有SAN的ISL不得与其他流量共享，并且不得超额认购（oversubscribed）。

下图说明了存储InMetroFCIP配置。

图1-6FCIP配置

AS53OO/55OOG2主机OS双活最佳实践

FC交换机FC在悔机

故障域3

AS5300/5500G2存储光纤端口的首选实践

AS53OO/55OOG2可以为每个安戟节点提供最多四个8Gbps4端口光纤通道HBA

功能。

•专用两个FC端口进行节点到远程站点节点通信。将这些端匚直接连接到远

程站点的交换机。

•使用其他FC端口进行主机和存储连接，若可能，将存储工作货载与该主机分

离。将这些端口连接到本地的交换机。

•通过使用专用于存储工作负载的相同端口来访问笫三个站点仲裁设备。

•在AS5300/5500G2存储,配置专用于节点到节点连接的端口的localIcportmask

值。使用交换机分区确保节点到远程站点通信时使用专用「•此H的的两个FC

端口。

AS53OO/55OOG2主机OS双活最佳实践

1.2.2光纤通道距离设置

使用长波（LW）SFP是克服长距离的一种合适的方法。支持主动和被动密集波分

复用（DWDM）和粗波分或用（CWDM）技术。

被动WDM设备本身不能改变波长。需耍使用彩色SFP,并且交换机供应商必须

支持。

主动WDM设备可以自己改变波长。

缓冲区信用（buffer-io-buffercredm）（也称为缓冲区到缓冲区（BB）信用〉用于FC

流发控制。它们表示端口可以存储的帧数。每次端口发送帧时，该端口的BB信

用减1。对于接收到的每个R_RDY,该端口的BB信用增加I。如果BB信用为

零，则在接收到R_RDY之前，对应的端口不能发送。

因此，缓冲区到缓冲区信用是必要的，以便在快速传输中（inflighl，具有多个FC

帧（图1-7）。需要适当数坦的缓冲区到缓冲区信用才能达到最佳状态性能。在

一定距离内实现最大性能的缓冲区信用量取决「链路的速度。

图1-7快速传输中的缓冲区信任

6FCfromes02Gb

2GbFClinkI।।.三三”

8GbFClinkiIdffi"砰0【I【111：11111111】三—…;a

7FCfrancs@80b（8B2Bcreditsoniy）

8GbFClinkBlEl.由向白♦............

该计算假定链路的另一端在接收端的最后一位到达接收端的同一时刻开始发送

R_RDY确认帧。这种情况是不正确的。以下指南提供了最少的数字。如果他路

距离和链路速度存在缓冲区信用不足，则性能将显着下降。下表说明了BB信用

与距离之间的关系。

表1-2缓冲区信用

FC挂路速度【0km缓冲区信用

1Gbps5

2Gbps10

4Gbps20

AS53OO/55OOG2主机OS双活最佳实践

8Gbps40

16Gbps80

AS53OO/55OOG2FCHBA提供的缓冲区到缓冲区信用的数量有限。HBA端口提供

41个缓冲区信用额度，这些额度足以以8Gbps的速度进行1（）公里的距离传输。

这些数字由HBA的硬件决定，不能更改。

StorwizeV7000Genl和Gen2仍然为8GbpsPC端U提供41缓冲X信用，为16

GbpsFC端口提供80缓冲区信用。在撰写本书时（2015年II月），IBM公布了

发布4端口l6GbFC适配器的意向声明，对于每个端口，将提供41个缓冲区信

用。（确认当前Indigo端口交型对应的缓冲区信用）批注[AJ1]:

FC交换机具有BB信用的默认设置.（在IBMb型/Brocade交换机中，每个端口

的默认值为8个BB.）尽管StorwizeV7000HBA提供41个BB信用，但交换机批注IAJ2I：

保持默认值。因此，您必须手动调整交换机BB信用。对于Breade交换机，可

以使用puncfgfportbuffcrs命令更改端口缓冲区信用。

1.3InMetro实施需要考虑的点

1.3.1规划注意事项

在实施之前，必须在物理资源和连接要求方面进行容笊规划.最好开始先尽可能

多的收集工作负载信息。工作负载分析可帮助确定I/O组（控制柜）的数量以及

磁盘驱动器的类型和数量。

使用InMetro配置,由于工作负载分布影响连接要求，因此/解站点之间的1：作负

教分配也很重要。低估连接资源可能导致性能不佳的解决方案。

确保连接设备，主机，I/O栈组件（HBAfirmware,设备驱动器，多路径）的版本

支持AS53OO/55OOG2

批注（HF3]:何思3

AS5300/5500G2V3.1XX♦持的硬件列表，设各物动，，■件和推荐的软件版本.

涉及HBAFW、driver,多路径兼容列表.

■参考・

IBV双活文档里以族接形式提供：hllM/www-

O/sui/docview.id=ss£1S1009559

链接内容较多，部门是否有对应文档、链接提供兼

容性列表.

AS53OO/55OOG2主机OS双活最隹实践

主动-主动SyncCopy注意事项

InMetro功能基于SyncCopyactive-active选项。这个SyncCopyactive-active选