红皮书单挑DS

1、红皮书单挑DS6800（续）之前jxufe前辈写过连载，没有受过ds6800培训,手持红书单挑i570+ds6800，最近正好有幸接触到DS6800，由于之前也没弄过，也是依靠红皮书和手册一步一步摸索，把我的理解和一些步骤写下来，有什么错误的地方请jxufe和各位前辈多多指教。硬件连接：怎么接expansion enclosure，这个问题困扰了我好久，对照着红皮书里面的图一根线一根线的对照，最后也没有看明白，但是，原理很重要，看完ds6000的内部构架图，怎么接一眼就明白了，嘿嘿。如果要接loop0，那就IN-OUT直接接就可以了，可以这样理解：ds6000的server enclosure

2、里本身就已经包含了一个在loop0的expansion enclosure，内部已经连接好了，因此，如果要接loop0，那就IN-OUT接起来就保证没问题。如果要接loop1，那就得从disk contrl出来交叉接第一个expansion enclosure，剩下的expansion enclosure就是IN-OUT了。所以又可以回归到另外一个问题，为什么ds6000可以接7个expansion enclosure，因为loop0上已经相当于有了一个expansion enclosure，只不过在server enclosure的内部，所以loop0上可以再接3个expansion enc

3、losure，而loop1上可以再接4个expansion enclosure。 本帖最后由 jiecho 于 2009-2-21 15:53 编辑 top.JPG (55.18 KB) 下载次数:12009-2-21 15:51Ds6000构架loop0.JPG (50.68 KB) 下载次数:02009-2-21 15:51loop0接法loop1.JPG (50.94 KB) 下载次数:02009-2-21 15:51loop1接法加电：接好了硬件，下面就是大事件了哦：加电开机！这个大事件也很简单，嘿嘿。看准那个白色的小钮，使劲捅一下，如果没有跑偏，就会听到呼呼的风扇声，咱们就把这个大家

4、伙开起来了，但是，是不是要先开expansion enclosure电源啊，嘿嘿，错了，6000好歹比4000大2000呢，怎么也得先进点，server enclosure会让expansion enclosure自动加电的，当然你得都接上电源。配置ip：下面就是要改用来管理ds6000的ip地址了，跟4000里差不多，ds6000里默认的ip是：13 for cluster014 for cluster1找出随机带的串口线，小口接到ds6000上，不要接错了，跟电话线接头差不多的那个，串口接到笔记本上，如果笔记本没有串口，人家IBM还送了一条一

5、头是串口，一头是USB的，还有一张光盘，怎么用，嘿嘿，自己琢磨吧。开个超级终端，每秒位数那里改成38400，敲两下回车，然后就guest/guest登陆了，剩下就是改ip、密码啥的，自己玩吧。不过还有另外的发现，如果是版本低一些的微码，你会发现ds6000是基于power linux的，还是2.4内核的，微码升级到最新，这些信息就被屏蔽掉了。如果能跳出那个配置菜单，弄到个shell，没准会有更多的发现呢。嘿嘿，想远了。SMC的安装很简单，包含ds6000 storage manager/dscli，ds6000 storage manager只能装在windows（2000、2003、xp）平

6、台上，dscli可以装在很多平台上（windows、linux、aix等）安装过程让你输密码的时候就输密码，其他的就next就好。ds6000 storage manager 和ds4000 storage manager还是有很大区别的，ds4000是cs结构的，到了ds6000就是基于was的bs结构了，用起来复杂一些，速度慢一些，其他就没啥缺点了，所以配置ds6000的时候用dscli比较好，简单快捷，逻辑结构也比较快捷，推荐。安装万SMC以后，就可以用admin/admin登陆了，登陆成功以后会强制修改密码，完成以后就会登录到SMC了，SMC的配置有了两个模式Real-time man

7、ager/Simulated manager,顾名思义，前面就是在线配置，后面就是模拟器性质的了。在Real-time manager模式中选择添加storage unit，输入ds6000的ip、S/N后，如果没有什么异常，就可以把ds6000加入到SMC里进行管理了。在使用一些copy service的时候，可能会使用的peer smc，也就是两个smc，这些我没有深究了。下面的工作，我们要配置一下dscli，以便我们操作的时候更方便，我的dscli是安装在linux里，其他的平台应该类似，dscli的配置文件是/opt/ibm/dscli/profile/file主要改

8、两个地方：hmc1改成你SMC的ip，devid有三部分组成，IBM+machine type+Serial Number，我的是改成下面的：xxxxxxx代表序列号，可以在ds6000前面找到。配置完成，就可以登陆dscli管理ds6000了。# Management Console/Node IP Address(es)#   hmc1 and hmc2 are equivalent to -hmc1 and -hmc2 command options.hmc1:   13#hmc2:  #

9、 Default target Storage Image ID#    "devid" and "remotedevid" are equivalent to#    "-dev storage_image_ID" and "-remotedev storeage_image_ID" command options, respectively.devid:              &

10、#160;   IBM.1750-xxxxxxx#remotedevid:   IBM.2107-AZ12341升级微码微码可以从IBM网站上下载，会让你注册并且提供DS6000的S/N等，升级过程就是在SMC里选好要升级的storage unit，transfer到ds6000后再active微码。微码的升级文件叫SEA.jar，开始半天没找到，以为是什么java的东西，呵呵。DS6000升级微码有两种模式：concurrent：也就是在线升级，所有连接主机的IO都不会中断，但是会发生SDD、MPIO等多路径软件failover的切换。过程就是首先升级

11、controllor card 0，然后active微码，这时候controllor card 0会offline，主机端的SDD、MPIO等会发生切换，等controllor card 0微码acitve并且online以后，再进行controllor card 1的微码升级，整个过程可能持续的时间非常长，有近一个小时。non-concurrent：这种最简单，就是停机，然后两个controllor card同时升级，如果是新设备第一次配置使用，推荐用这种，升级需要的时间比concurrent模式短很多。注意的问题：1，升级微码之前一定要仔细看release notes，里面有minimum

12、 requirement的需求。2，升级微码一定是首先升级DS6000硬件的微码，然后再升级SMC(ds6000 storage manager/dscli)。3，升级之前在dscli里用lsproblem检查是否有open的lsproblem，如果有的话请联系IBM先解决这些问题，如果一些smtp检测之类的可以用closeproblem关掉，这些是用来发mail检测ds6000状态或者进行remote support使用的。下面是最重要的部分，逻辑配置了，详细的逻辑概念请参考红皮书sg246781中virtualization concept部分。在进行逻辑配置之前，请确保license已经

13、生效：dscli> lskey IBM.1750-xxxxxxxDate/Time: February 19, 2009 11:21:39 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxActivation Key        Capacity (TB) Storage Type=Operating Environment            10 FBarraysite：ds60

14、00里面是4块盘组成一个arraysite，ds8000里是8块。arraysite没有什么实际的意义，就是几块盘的组合。arraysite以S1、S2、S3等表示。array：一个array有一个或者两个arraysite组成，也就是一个array里包含4块或者8块盘。在array的层次上，就需要有raid了。ds6000里面支持raid5或者raid10，根据raid选择的不同，会影响到最后存储的容量，支持的raid方式：P代表parity disk  S代表spare driveRAID 5：2+P+S,3+P      

15、60; 1个array包含1个arraysite   总共4块盘 6+P+S,7+P        1个array包含2个arraysite   总共8块盘RAID 10：2x1+2S,2x2 or   1个array包含1个arraysite   总共4块盘2x3+2S,2or x4   1个array包含2个arraysite   总共8块盘array以A1、A2等表示。dscli> lsarra

16、ysiteDate/Time: February 19, 2009 11:22:12 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxarsite DA Pair dkcap (109B) State      Array=S1     0               300.0 Unassigned -S2    

17、0;0               300.0 Unassigned -S3     0               300.0 Unassigned -S4     0               300.0 Unas

18、signed -#一共四个arraysite，state是Unassigned，我们可以在其上创建array。dscli> mkarray -raidtype 5 -arsite S1,S2Date/Time: February 19, 2009 11:22:39 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00004I mkarray: Array A0 successfully created.dscli>mkarray -raidtype 5 -arsite S3,S4Date/Time: Febru

19、ary 19, 2009 11:22:50 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00004I mkarray: Array A1 successfully created.#创建两个raid5的array（A1、A2），方式是6+P+S。dscli> lsarrayDate/Time: February 19, 2009 11:22:53 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxArray State   

20、0;  Data   RAIDtype  arsite Rank DA Pair DDMcap (109B)=A0    Unassigned Normal 5 (6+P+S) S1,S2  -    0                300.0A1    Unassigned Normal 5 (6+P+S) S3,S4  - 

21、60; 0                300.0#最终的结果。下面就是rank了，一个rank包含一个array，对open system来说，创建rank的过程就是把一个array分割成很多大小都是1G的extent，多个extent可以组成extpool。在rank之上是extpool，一个extpool可以包含一个或者多个rank，但是前提是rank包含的disk、rank的类型、raid类型必须相同。#在array A0创建rank，类型是fb，即open system使用。dscl

22、i> mkrank -array A0 -stgtype fbDate/Time: February 19, 2009 11:23:15 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00007I mkrank: Rank R0 successfully created.dscli> lsarrayDate/Time: February 19, 2009 11:24:59 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxArray State&#

23、160;     Data   RAIDtype  arsite Rank DA Pair DDMcap (109B)=A0    Assigned   Normal 5 (6+P+S) S1,S2  R0   0                300.0A1    Unassigned Normal 5 (6+P+S) S3,

24、S4  -    0                300.0dscli> mkrank -array A1 -stgtype fbDate/Time: February 19, 2009 11:25:39 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00007I mkrank: Rank R1 successfully created.#创建完成两个rank（R0、R1）d

25、scli> lsrankDate/Time: February 19, 2009 11:27:08 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxID Group State      datastate Array RAIDtype extpoolID stgtype=R0     - Unassigned Normal    A0          &

26、#160;5 -         fbR1     - Unassigned Normal    A1           5 -         fb#创建两个extpool，名字分别是extpool0、extpool1，rankgrp参数指定在ds6000的那个server上运行，类似4000里面的preferpath，红皮书里叫Se

27、rver affinity，这样可以分散IO提高性能。dscli> mkextpool -rankgrp 0 -stgtype fb extpool0Date/Time: February 19, 2009 11:28:39 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00000I mkextpool: Extent pool P0 successfully created.dscli> mkextpool -rankgrp 1 -stgtype fb extpool1Date/Time: February

28、 19, 2009 11:28:50 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00000I mkextpool: Extent pool P1 successfully created.dscli> lsextpoolDate/Time: February 19, 2009 11:29:18 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxName     ID stgtype rankgrp status

29、 availstor (230B) %allocated available reserved numvols=extpool0 P0 fb            0   full                 0          0         0&

30、#160;       0       0extpool1 P1 fb            1   full                 0          0       

31、;  0        0       0把rank R0放到extpool P0里面dscli> chrank -extpool P0 R0Date/Time: February 19, 2009 11:29:47 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00008I chrank: Rank R0 successfully modified.dscli> chrank -extpool P1 R1Date/Time: February 19, 2009 11:33:05 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00008I chrank: Rank R1 successfully modif