Linux多路径multipath安装配置

1、STARSINOLINUXmulti-path安装配置测试报告RenYang浙江星汉侑思博1存有限公司一、测试环境摘要4二、检查安装multipath42.1检查是否已安装42.2若未安装则安装42.2.1搭建yum源42.2.2通过yum源安装并自启动42.3核查安装是否成功52.4设为开机自动启动5三、酉己置multipath52.1创建配置脚本52.2赋予脚本执行权限72.3执行脚本82.4确认配置结果82.5正常使用磁盘9四、测试92负载均衡测试92路径切换测试9五、常用操作命令10启停mulitipath服务10删除现有路径10格式化路径（重新扫描）10查看多路径10重载multip

2、athd月艮务10查看所有磁盘wwid10显示当前devicemapper信息11说明:本文档中安装部署部分所提到的步骤都在测试环境中通过。署参考手册。但因环境不同而无法保证在其他环境中准确无误环境自行修改）。本文档仅供参考，建议按照官方手册安装配置。蓝色字体一命令行绿色字体一脚本或输出结果暗红字体一表示变量（可更改）红色字体一需注意之处#root用户下执行可以作为安装部（配置请按照特定一、测试环境摘要FreeNAS模拟iSCSI存储并划分空间分配给Linux5系统二、检查安装multipath检查是否已安装rootlinux5#rpm-qa|grepmapperdevice-mapper-1

3、.02.55-2.el5device-mapper-1.02.55-2.el5device-mapper-event-1.02.55-2.el5device-mapper-multipath-0.4.7-42.el5若未安装则安装搭建 yum 源mkdir-p/mnt/yummount/dev/cdrom/mnt/yum如果从ISO挂载，则使用如下命令：mount-oloop-tiso9660/tmp/Redhat_5.0_U6_64.ISO/mnt/yumecho”yum/etc/yum.repos.d/yum.repoechoname=yum/etc/yum.repos.d/yum.rep

4、oechobaseurl=file:/mnt/yum/Server/etc/yum.repos.d/yum.repoechoenabled=1/etc/yum.repos.d/yum.repoechogpgcheck=1/etc/yum.repos.d/yum.repoechogpgkey=file:/mnt/yum/RPM-GPG-KEY-redhat-release/etc/yum.repos.d/yum.repo通过 yum 源安装并自启动yum-yinstalldevice-mapperdevice-mapper-multipath核查安装是否成功rootlinux5#lsmod|gr

5、epdm_multipathdm_multipath569210scsi_dh421771dm_multipathdm_mod1013934dm_mirror,dm_multipath,dm_raid45,dm_log如果模块没有加载成功请使用下列命初始化DM或重启系统:modprobedm-multipathmodprobedm-round-robinservicemultipathdstartmultipath-v2设为开机自动启动chkconfig-level2345multipathdon三、酉己置multipath创建配置脚本Multipath的配置文件是/etc/multipath

6、.conf,为了快速进行配置， 可直接在linux系统任意目录创建一个脚本并将以下内容复制到脚本中：cp/etc/multipath.conf/etc/multipath.conf.bakechoblacklistdevnodeA(ram|raw|loop|fd|md|dm-|sr|scd|st)0-9*devnodeAhda-zdevnodeAcciss!c0-9d0-9*devnodeAsda-b)defaultsudev_dir/devpolling_interval10failbackimmediateno_path_retry5rr_min_io100path_checkerturs

7、electorround-robin0path_grouping_policyfailoveruser_friendly_namesyesmultipaths/etc/multipath.confforpvincat/proc/partitions|awkprint$4|grepsd|grepechoscsi_id-g-u-s/block/$pv$.wwid;doneforwwidinawkNF$.wwid|sort|uniq|awkprint$1、;doechoFoundadevice:forpvincat/proc/partitions|awkprint$4|grepa-z$;doifsc

8、si_id-g-u-s/block/$pv=$wwid;thenecho$pv:scsi_id-g-u-s/block/$pv;fidonestop=0while$stop-lt1;doif$mode=0600;thenecho$mode/etc/multipath.conf;fiecho/etc/multipath.confstop=1elseif$add=n;thenstop=1elseif$add=q;thenrm-fr$.wwid;break2;fififidonedoneecho/etc/multipath.confrm-fr$.wwida-z$;dosd|grepread-pWhe

9、thertoadd$wwid?y,n,q(y)addif-z$add|$add=y;thenechomultipath/etc/multipath.confechowwid$wwid/etc/multipath.confread-palias:(none)aliasif-n$alias;then$alias/etc/multipath.conf;firead-pgid:(none)gidif-n$gid;then$gid/etc/multipath.conf;firead-puid:(none)uidif-n$uid;then$uid/etc/multipath.conf;firead-pmo

10、de:0600,none(none)modeechoechoechoaliasgiduidmode备注：1、红色字体部分根据现场环境进行修改；2、也可以按wwid或device进行排除(示例如下)按wwid方式：blacklistwwid26353900f02796769)按device方式：blacklistdevicevendorIBMproduct3S42#DS4200Product10)devicevendorHPproduct*)3、也可以选择性使用blacklist_exceptions进行排除：例如：如果有大量设备，但只有一个需要多路径(WWI师112233445566),此时不

11、需要将想要使用多路径的设备之外的每个设备单独加入黑名单，只需要将所有设备都加入黑名单，然后只允许想要使用多路径的设备即可：blacklistwwid*)blacklist_exceptionswwid112233445566)赋予脚本执行权限chmod+xtmp.sh执行脚本rootlinux5#Foundadevice:sdd:3300000001f548fcaWhethertoadd3300000001f548fca?y,n,q(y)略去N字备注：根据提示操作即可，alias、gid、uid、mod/E强制要求，根据具体环境及需求选择。确认配置结果1、启动服务：/etc/init.d/mu

12、ltipathdrestart2、查看多路径：rootlinux5mapper#multipath-lltest2(330000000c2112572)dm-0FreeBSD,iSCSIDISKsize=2.0Gfeatures=1queue_if_no_pathhwhandler=0rw_round-robin0prio=1active_31:0:0:0sdc8:32activereadytest1(3300000001f548fca)dm-1FreeBSD,iSCSIDISKsize=100Gfeatures=1queue_if_no_pathhwhandler=0rw_round-rob

13、in0prio=1active_32:0:0:0sdd8:48activeready./tmp.sh回车alias:(none)gid:(none)uid:(none)test113001101mode:0600,none(none)06003、其他核查方式会在/dev/mapper/目录下多出类似mpath0、mpath1之类设备（如果指定了alias则以别名方式显示）用fdisk-l命令可以看到多路径软件创建的磁盘，如/dev/dm-0-3等正常使用磁盘要使用多路径生成的磁盘直接操作/dev/mapper/目录下的磁盘就便可。在对多路径软件生成的磁盘进行分区之前最好运行一下pvcreate

14、命令：pvcreate/dev/mapper/test1fdisk/dev/mapper/test1备注：如果磁盘数目较多，可采用for循环操作：fordiskinocrvotelocrvote2oradataloradata2;dopvcreate/dev/mapper/$diskdone四、测试负载均衡测试1、使用dd命令来对设备进行写操作，并同时通过iostat来查看I/0状态：ddif=/dev/zeroof=/dev/mapper/test12、另开启一个终端令查看IO情况：iostat1010说明：当对/dev/mapper/test1读写时，实际上是对其所包含的所有设备（当前active）的写过程。路径切换测试拔掉服务器或存储任意一根光纤跳线，稍等一会通过multipath-ll查看路径状态。五、常用操作命令删除现有路径multipath-F格式化路径（重新扫描）multipath-v2multipath-v3查看多路径multipath-ll入该文件。servicemultipathdreload查看所有磁盘 wwidforiincat/proc/partitions|awkprint$4|grepsd|grepa-z$;doecho$i:scsi_id-g-u-s/block/$i;done5.1 启停 mulitipath服务/e