H3C FlexStorage P5730存储配置指导

1、 33 H3C FlexStorage P5730存储配置指导目 录 TOC o 1-3 h z u HYPERLINK l _Toc398823950 1 产品及工具介绍 PAGEREF _Toc398823950 h 11 HYPERLINK l _Toc398823951 1.1H3C FlexStorage P5730介绍 PAGEREF _Toc398823951 h 11 HYPERLINK l _Toc398823952 1.2故障转移管理器介绍 PAGEREF _Toc398823952 h 12 HYPERLINK l _Toc398823953 1.3CMC介绍 PAGER

2、EF _Toc398823953 h 13 HYPERLINK l _Toc398823954 2 最佳实践 PAGEREF _Toc398823954 h 24 HYPERLINK l _Toc398823955 3 配置前的准备和规划 PAGEREF _Toc398823955 h 35 HYPERLINK l _Toc398823956 3.1组网规划 PAGEREF _Toc398823956 h 35 HYPERLINK l _Toc398823957 3.1.1 组网说明 PAGEREF _Toc398823957 h 35 HYPERLINK l _Toc398823958 3.

3、1.2 组网规划 PAGEREF _Toc398823958 h 35 HYPERLINK l _Toc398823959 3.1.3 IP SAN地址规划及拓扑 PAGEREF _Toc398823959 h 35 HYPERLINK l _Toc398823960 3.2 网卡绑定规划 PAGEREF _Toc398823960 h 36 HYPERLINK l _Toc398823961 3.2.1 网卡绑定原理 PAGEREF _Toc398823961 h 36 HYPERLINK l _Toc398823962 3.2.2 网卡绑定方式选择 PAGEREF _Toc39882396

4、2 h 36 HYPERLINK l _Toc398823963 3.3 RAID规划 PAGEREF _Toc398823963 h 37 HYPERLINK l _Toc398823964 3.4 群集规划 PAGEREF _Toc398823964 h 37 HYPERLINK l _Toc398823965 4 配置 PAGEREF _Toc398823965 h 49 HYPERLINK l _Toc398823966 4.1 CMC安装 PAGEREF _Toc398823966 h 49 HYPERLINK l _Toc398823967 4.2 故障转移管理器安装配置 PAGE

5、REF _Toc398823967 h 49 HYPERLINK l _Toc398823968 4.2.1 故障转移管理器安装 PAGEREF _Toc398823968 h 49 HYPERLINK l _Toc398823969 4.2.2 故障转移管理器配置 PAGEREF _Toc398823969 h 410 HYPERLINK l _Toc398823970 4.3 H3C FlexStorage P5730基本配置 PAGEREF _Toc398823970 h 411 HYPERLINK l _Toc398823971 4.3.1 配置网卡地址 PAGEREF _Toc398

6、823971 h 411 HYPERLINK l _Toc398823972 4.3.2 通过CMC添加存储 PAGEREF _Toc398823972 h 412 HYPERLINK l _Toc398823973 4.3.3 配置RAID PAGEREF _Toc398823973 h 413 HYPERLINK l _Toc398823974 4.3.4 基本配置 PAGEREF _Toc398823974 h 413 HYPERLINK l _Toc398823975 4.3.5 管理组、群集和卷配置 PAGEREF _Toc398823975 h 416 HYPERLINK l _T

7、oc398823976 4.3.6 存储license注册 PAGEREF _Toc398823976 h 424 HYPERLINK l _Toc398823977 4.4 新建卷 PAGEREF _Toc398823977 h 427 HYPERLINK l _Toc398823978 4.5 服务器配置 PAGEREF _Toc398823978 h 429 HYPERLINK l _Toc398823979 4.6 注意事项 PAGEREF _Toc398823979 h 430 HYPERLINK l _Toc398823980 附一、存储信息收集 PAGEREF _Toc39882

8、3980 h 432 HYPERLINK l _Toc398823981 1、AHS日志收集 PAGEREF _Toc398823981 h 432 HYPERLINK l _Toc398823982 2、管理组存储系统支持套件收集 PAGEREF _Toc398823982 h 432产品及工具介绍 H3C FlexStorage P5730介绍H3C FlexStorage P5730是H3C推出的一款专为满足虚拟化环境不断变化的需求的存储。它是一款全方位的解决方案：可满足可用性、数据移动性、灾难恢复、可管理性及增长等方面的需求，功能上具有以下特点： 通过建立存储群集和网络RAID，数据在

9、站点发生故障期间仍可用可扩展的性能，无中断式升级集中的管理控制台快照、远程拷贝可降低灾难恢复的成本H3C FlexStorage P5730系列存储包含3款型号： VC-FST-P5730-15TS VC-FST-P5730-22.5TS VC-FST-P5730-22.5TFS StoreVirtual Scalability1 P5730-15TS P5730-22.5TS P5730-22.5TFS Number of drives 25 25 25 Capacity 600GB 10K SAS 900GB 10K SAS 900GB 10K SAS CPUs 1 (6 core) 1

10、(6 core) 1 (6 core) RAID Controllers 1 1 1 Memory 64GB 64GB 64GB Controller Cache 2GB 2GB 2GB Storage Ports (1GbE) 4 4 4 Storage Ports(10GbE) 2 2 2 Storage FC Support NA NA 8Gb 表1-1-1 产品型号图1-1-1 H3C FlexStorage P5730实物图H3C FlexStorage P5730前面板硬盘排序遵循从上到下、从左到右的原则，如图1-1-2所示图1-1-2 H3C FlexStorage P5730前

11、面板硬盘序号H3C FlexStorage P5730后面板如图1-1-3所示图1-1-3 H3C FlexStorage P5730后面板1、10Gb SFP+ 和8Gb FC插槽2、PCI(留用)3、供电模块14、供电模块1LED指示灯5、供电模块1电源接口（集成PDU通信）6、供电模块2电源接口（集成PDU通信）7、供电模块2LED指示灯8、供电模块29、单元定位指示灯/按钮10、USB接口（4个留用）11、VGA12、iLO管理口13、串口14、千兆以太网口（4个） 故障转移管理器介绍在一个群集中如果有两台存储，当一台存储变为不可用时，会导致另一台正常的存储也不能访问，导致业务中断。解

12、决办法有以下两种：配置虚拟管理器 故障转移管理器（FOM Failover manager）虚拟管理器需要手动干预才能恢复仲裁，如果在恢复仲裁后继续运行可能会产生不希望有的影响。因此不建议使用虚拟管理器，推荐使用故障转移管理器。故障转移管理器必须安装在存储管理组之外的设备空间上,它是设计为在 VMware 或 Microsoft Hyper-V Server 环境中作为虚拟设备运行的SAN/iQ 软件的专用版本。故障转移管理器作为系统中的实际管理器参与管理组，它仅执行仲裁操作，而不是数据移动操作。 CMC介绍CMC(集中管理控制台 The Centralized Management Cons

13、ole )是一款针对H3C FlexStorage的集中化管理软件，可以将虚拟化存储的管理简单化，CMC软件支持以下操作系统：Windows XPWindows VistaWindows 7Windows Server 2003 R2Windows Server 2008Windows Server 2008 R2Windows Server 2012SUSE Linux Enterprise 10 / 11RedHat Enterprise Linux 4 / 5.0 / 5.1/ 5.2/ 5.3/ 5.4/ 5.5/ 5.6/ 6.1Fedora 11 / 12 / 13HP-UX 11

14、i v2 (11.23) / v3 (11.31最佳实践H3C FlexStorage P5730组建IPSAN的最佳实践，如下图2-1-1所示。群集交换机为万兆交换机，做IRF堆叠。存储节点万兆双上行聚合连接到两台交换机，该万兆网段作为存储管理组网段，万兆聚合网卡作为LeftHand OS接口提供群集通信和iscsi服务。存储节点千兆网卡连接到管理网交换机，作为管理员独立管理使用。管理员可以通过该网段使用CMC对存储管理组进行高效管理。同时当群集网段不能提供NTP、DNS、SMTP和SNMP Trap接收服务时，可以使用此网段连接上述服务器。图 2-1-1 iscsi最佳实践组网说明：Lef

15、tHand OS接口是iSCSI和群集通信的接口配置前的准备和规划 组网规划组网说明H3C FlexStorage P5730全系产品支持iSCSI类型数据访问，可以构建IP SAN。H3C FlexStorage P5730在构建存储网络时，要求所有存储节点都在同一个二层网段，并且双节点时必须使用故障转移管理器（FOM Failover manager），所有存储节点和FOM需要加入同一个管理组。组网规划H3C FlexStorage P5730支持IP SAN，本手册以存储双节点介绍IP SAN配置步骤。组网时一般要求提供两个网段，建议使用万兆网卡创建管理组作为iSCSI和群集通信网络，千

16、兆网卡作为存储的日常管理使用。IP SAN地址规划及拓扑IP SAN要求所有存储节点规划在同一个二层网络，推荐存储使用万兆网卡作为Lefthand OS口。本例使用万兆网卡1作为LeftHand OS接口，使用千兆网卡1作为单独的管理口，所有存储节点的LeftHand OS接口和FOM网卡在同一网段并加入同一个管理组。各个设备的IP地址规划如表3-1-1。设备名称万兆网卡IP（LeftHand OS）千兆网卡IP（独立管理）10集群虚IPH3C-P5730-11111H3C-P5730-21212FOM13IPSwitch00业务服务器5（挂载存储的网口）表3-1-1 IP SAN地址规划表说

17、明：本规划中H3C FlexStorage P5730使用万兆卡1作为LeftHand OS接口，千兆口1作为独立的管理口使用，实际组网中也可以使用万兆网卡聚合连接堆叠交换机作为LeftHand OS接口，提高带宽和链路冗余性。图3-1-1 IP SAN组网规划拓扑图说明：图中只列出管理组及服务器部分拓扑。网卡绑定规划网卡绑定原理H3C FlexStorage P5730网卡绑定分为三种模式：主动-被动模式、链路聚合动态绑定（802.3ad）模式和自适应负载平衡（ALB Adaptive Load Balancing）模式。主动-被动模式的网卡绑定允许指定将用于进行数据传输的首选接口，是活动接

18、口。其他接口将充当备份，其状态为“被动（就绪）”。链接聚合动态模式即为802.3ad 动态聚合，绑定端口与交换机进行LACP动态协商进行绑定，允许存储系统同时使用多个接口进行数据传输。这些接口均为活动状态。如果到一个网卡的接口链接脱机，则其他接口将继续运行。使用多个网卡还可增加网络带宽。自适应负载平衡允许存储系统同时使用多个接口进行数据传输，这些接口均为活动状态。如果到一个网卡的接口链接脱机，则其他接口将继续运行。使用多个网卡还可增加网络带宽。存储ALB模式绑定可以连接到同一台二层交换机，也可以多个网卡连接到不同的独立的二层交换机。网卡绑定方式选择在对网卡配置绑定时，网卡绑定需要根据实际组网进

19、行选择：如果客户端需要跨三层访问存储，存储聚合模式选择LACP，交换机侧配置LACP动态聚合；如果客户端通过二层访问存储，存储则可以选择ALB聚合模式，交换机侧不必配置聚合； 不建议使用主动-被动模式。RAID规划存储节点在加入管理组之前，可以根据业务需求更改本地RAID的级别，以达到不同级别的性能和数据冗余性要求。系统默认创建了两个RAID5，可以转换成RAID6或者RAID1+0。RAID级别描述RAID10-镜像和条带提供数据保护和高性能的最佳组合。RAID1+0通过在至少4块磁盘上存储双份数据实现高可靠性。RAID1+0要求必须是偶数磁盘，它是成本最高的冗余方法，因为它需要50%的磁盘

20、空间来存储冗余数据。RAID1+0首先镜像一个磁盘到另外一个磁盘形成镜像组，然后在不同的镜像组之间进行数据条带化。如果一个物理磁盘故障，对应的镜像磁盘提供备份数据文件访问，从而正常的系统操作不中断。RAID1+0可以保证多块不在同一个镜像组里的磁盘故障而不中断数据访问。RAID5提供数据保护和最大可用空间的最佳组合，同时性能高于RAID6。RAID5在所有物理磁盘上存储校验数据，允许更多的并行读操作和更高的性能。如果一个物理磁盘故障，控制器使用剩余磁盘上的数据块重构故障磁盘上的数据。存储系统可以继续提供数据访问，只是性能稍有下降，直到管理员更换掉故障磁盘。RAID5可以允许一块物理磁盘损坏。创

21、建RAID5至少需要三块磁盘，它的可用容量是（N-1）*单块容量，N为逻辑阵列中包含的物理磁盘数。RAID6提供最好的数据保护机制，是RAID5的扩展。RAID6使用多校验集存储数据，校验数据存储在两块磁盘上，它可以允许同时损坏两块磁盘。创建RAID6至少需要4块磁盘。由于校验数据分布在多个磁盘上，RAID6性能比RAID5低。RAID6的可用容量是（N-2）*单块磁盘容量，N为逻辑阵列中包含的物理磁盘数。说明：H3C FlexStorage P5730阵列为出厂时系统自动创建，禁止进入ORCA或者SSA进行阵列删除。一旦误删除系统阵列，需要进行系统恢复。群集规划一个管理组可以包含多个群集，每

22、个群集节点数量的多少，决定了卷的网络raid级别。规划群集时需要考虑两方面的因素：1、存储系统容量创建群集时，所有存储节点具有相同的容量。当群集包含的存储节点具有不同的容量时，群集内的所有存储节点以最小节点容量进行计算，而节点的容量大小又是由存储节点的磁盘RAID级别决定的。当向已有群集增加节点时，存储节点的容量也是非常重要的。如果向一个已有群集加入了一个小容量的节点，群集的整体容量会减小。2、存储节点数量一个存储群集的数量最多不超过10台。配置CMC安装本指导书示例使用Windows 7安装CMC软件，CMC软件可从存储随机光盘获取，也可从FTP上获取，CMC软件11.0版本下载路径如下：/

23、Technical_Support_Documents(技术支持文件)/32-云计算资料/应用程序/CMC存储管理软件/HP_StoreVirtual_Centralized_Management_Console_for_Windows_BM480-10555.exe。下载好软件之后，双击打开软件，软件自解压做安装准备，之后的安装步骤与一般软件相同，不再赘述。说明：目前H3C FlexStorage发货OS版本为11.0，需要CMC版本不低于11.0。故障转移管理器安装配置故障转移管理器安装本指导以在安装有VMware workstation的windows服务器上安装为例，获取FOM软件11

24、.0版本FTP路径如下：/Technical_Support_Documents(技术支持文件)/32-云计算资料/FOM/HP_StoreVirtual_Failover_Manager_FOM_for_VMware_Player_Workstation_BM480-10560.exe下载好FOM软件后，运行软件进行安装，经过多步下一步操作完成安装。进入安装目录点击FOM.vmx运行该软件，启动完毕之后进入图4-2-1所示界面，按照提示输入start，进入FOM界面配置。图4-2-1 FOM启动界面若在vSpare环境中部署FOM，获取FOM OVF模板11.0版本FTP路径如下：/Tech

25、nical_Support_Documents(技术支持文件)/32-云计算资料/FOM/ HP_StoreVirtual_Failover_Manager_FOM_for_vSphere_OVF_BM480-10559.zip获取软件后解压缩，登陆vClient客户端进行OVF模板部署。说明：目前H3C FlexStorage发货OS版本为11.0，需要FOM版本与存储节点版本保持一致。故障转移管理器配置配置过程中使用“Tab”键，切换选择菜单。（1） 选择“Login”，如图4-2-2进入主配置菜单图4-2-2 FOM登陆页面（2） 选择“Network TCP/IP Settings”，

26、如图4-2-3配置网络参数说明：FOM和LeftHand OS接口在同一网段。图4-2-3 FOM主菜单（3） 选择“eth0”，如图4-2-4配置eth0的参数图4-2-4 选择网口（4） 进入eth0菜单后，如图4-2-5配置主机名和网络地址图4-2-5 配置网络参数（5） 配置好主机名和IP地址后选择“OK”，弹出图4-2-6提示框，选择“OK”确认修改网络参数图4-2-6 网络参数确认H3C FlexStorage P5730基本配置配置网卡地址P5730默认IP是DHCP自动获取的，需要手动配置静态IP，使用CMC添加存储之前，需要先使用显示器和键盘配置存储的网卡地址，具体配置步骤与

27、FOM相同，请参考4.2.2小节。建议将千兆网卡和万兆网卡地址全部配好，方便后续配置，FlexLOM为千兆网卡，NICSlot1为万兆网卡，如图4-3-1所示。图4-3-1 网卡说明：初始配置存储时也可通过iLO口使用remote console功能配置。通过CMC添加存储发现存储时，可添加千兆网口地址，也可添加万兆网口地址，本例中由于需要添加FOM，所以使用万兆网口地址进行添加存储节点。（1） 安装好CMC后打开控制台，控制台布局如下图4-3-2所示，点击查找系统图4-3-2 CMC控制台界面（2） 点击“添加”，输入P5730的IP地址，点击“确定”，依次添加两台存储节点和FOM，如图4-

28、3-3所示图4-3-3 查找系统配置RAID存储节点在添加到管理组前可以修改raid类型，出厂默认为RAID5，可以修改为raid6或者raid10，如图4-3-4和4-3-5所示。图4-3-4 重新配置RAID（一）图4-3-5 重新配置RAID（二）说明：配置RAID一定要在配置管理组之前，配置好管理组后，将不允许再配置RAID。基本配置1、修改主机名（1） 将H3C FlexStorage P5730添加到CMC控制台后，右键点击“编辑主机名”，修改存储的主机名，如图4-3-6所示图4-3-6 编辑主机名2、配置网络（1）如果需要配置万兆网卡聚合，在CMC导航栏选中节点的网络选项，选择右

29、侧TCP/IP选项卡，按住Ctrl键选择两个万兆网卡配置绑定，如图4-3-7和4-3-8所示图4-3-7 新建绑定（一）图4-3-8 新建绑定（二）（2）此处也可配置网卡地址，双击千兆网卡1,配置管理口IP，一般将设备的网关设在管理口上，方便跨网段管理，如图4-3-9所示图4-3-9 配置管理口地址3、选择LeftHand OS接口（1）在网络中的“通信”选项卡，点击下面的“通信任务”，选择“选择LeftHand OS接口”，在弹出的选项框中选择万兆口1，如果使用的是绑定口，请选择具体的bond口，点击“确定”完成，如图4-3-10 和图4-3-11所示图4-3-10 选择OS接口（一）图4-

30、3-11 选择OS接口（二）管理组、群集和卷配置1、创建管理组（1） 在控制台添加存储设备和FOM之后，需要创建存储管理组，为IP SAN提供高可靠性存储空间，如图4-3-12所示点击“管理组、集群和卷向导”图4-3-12 入门发射台（2） 进入管理组、群集和卷向导，点击“下一个”，开始配置，如图4-3-13所示图4-3-13 管理组、群集和卷向导（一）（3） 新建管理组，如图4-3-14所示，点击“下一个”图4-3-14 管理组、群集和卷向导（二）（4） 输入管理组的名字（区分大小写），如图4-3-15所示，选中存储设备和FOM，然后点击“下一个”图4-3-15 管理组、群集和卷向导（三）（

31、5） 为管理组添加管理用户，如图4-3-16所示图4-3-16 管理组、群集和卷向导（四）（6） 为管理组添加NTP服务器，可以使管理组内的设备自动同步时间，如果局域网内NTP服务器，可以手工设置管理组的时间，如图4-3-17和图4-3-18所示图4-3-17管理组、群集和卷向导（五）图4-3-18 管理组、群集和卷向导（六）（7） 如果管理组内需要使用主机名进行管理操作，需要配置DNS信息，如果不需要则可以空配置，点击“接受不完整”，如图4-3-19和图4-3-20所示图4-3-19 管理组、群集和卷向导（七）图4-3-20 空DNS配置确认（8） 管理组支持邮件通知等功能，启用邮件通知功能

32、，需要配置SMTP信息，如果不需要则可以空配置，如图4-3-21和图4-3-22所示图4-3-21 管理组、群集和卷向导（七）图4-3-22 空SMTP配置确认2、创建群集（1） 创建群集，选择“标准群集”，如图4-3-23所示图4-3-23 管理组、群集和卷向导（八）（2） 为群集命名并选择存储系统，如图4-3-24所示命名为“cluster1”，选择两个存储节点图4-3-24 管理组、群集和卷向导（九）（3） 群集使用预分配的虚拟IP地址对外提供iSCSI访问，如图4-3-25和4-3-26所示，为群集配置VIP和子网掩码，VIP必须与LeftHand OS接口在同一个子网图4-3-25

33、管理组、群集和卷向导（十）图4-3-26 管理组、群集和卷向导（十一）3、创建卷（1） 创建好群集后，创建一个卷，可按照需要大小创建，也可以选择右下方的“跳过创建卷”，管理组创建成功后再按需要创建卷，如图4-3-27所示图4-3-27 管理组、群集和卷向导（十二）（2） 点击“完成”后，开始创建管理组，创建完成后显示摘要以供检查，如图4-3-28和图4-3-29所示图4-3-28 创建管理组图4-3-29 管理组摘要存储license注册（1） 打开注册网站 HYPERLINK / / ，在授权订单号的位置输入Order Number，点击Submit,如图4-3-30所示图4-3-30 li

34、cense注册页面（2） 注册过程中需要注册用户。根据输入的order number 号码，系统会列出这个订单号对应的产品是什么，显示该EON号是否可用，确认无误后，点击激活按钮，如图4-3-31所示图4-3-31 EON确认（3） 在接下来的页面中选择“I am activating for myself”，然后点击“Next”，如图4-3-32所示。然后需要输入网卡1的MAC地址（此地址在CMC控制台可以查看），如图4-3-33所示，点击“next”图4-3-32图4-3-33 已注册的所有者信息(4） 页面提示注册成功，可以点击保存到文件直接保存到本地，也可以发送Email，如图4-3-

35、34所示图4-3-34 生成密钥(5) 密钥文件保存到本地后，打开lic文件，复制文本中所有的字符，如图4-3-35所示 图4-3-34 密钥文件(6) 使用CMC登陆管理组，在管理组名字右键点击“注册”按钮，弹出“注册管理组”对话框，点击“注册任务”选择“功能注册”弹出以下对话框，选中对应存储系统，点击“编辑许可密钥”，输入生成的密钥，点击确定注册完成，如图4-3-35所示图4-3-35 密钥注册新建卷创建管理组及群集后，可以根据需要新建卷，选中“卷和快照”右键选择“新建卷”，在弹出的窗口“基本”选项卡输入卷的名称和报告大小，在“高级”选项框中选择群集、数据保护级别、类型和自动配置。其中数据

36、保护级别为网络RAID级别，当集群中节点数大于2时，建议选择网络RAID10，可以保证卷的高可靠性和高性能。类型选择为主卷，自动配置为完全。如图4-4-1至图4-4-3所示图4-4-1 新建卷（一）图4-4-2 新建卷（二）图4-4-3 新建卷（三）说明： 完全自动配置在 SAN 上保留的空间量与对应用程序服务器显示的空间量相同。完全自动配置可确保应用程序服务器不会发生写入失败。当进行了完全自动配置的卷接近容量极限时，您将收到磁盘几乎已满的警告。精简自动配置在 SAN 上保留的空间量比对应用程序服务器显示的空间量少。将数据写入卷中时，LeftHand OS 软件将根据需要分配空间。精简自动配置还允许存储群集为应用程序服务器提供的存储大于群集中实际存在的存储。如果