SUN V490+OracleHA双机改造文档

1、PAGE PAGE 88 FZPU双机安装文档 (Solaris 10 + Oracle 9i + SVM + Sun Cluster 3.1)文档版本：RC V1.00 编写作者 ：Fzpu 印刷约定 蓝色代代表系统shhow ruun内容 红色代代表注释参考资料:Sun Cluuster 3.1 88/05 发发行说明（适适用于 Soolariss OS）Sun Cluuster 软件安装指指南（适用于于 Solaaris OOS）Sun Cluuster 系统管理指指南（适用于于 Solaaris OOS） 用于 Oraccle 的 Sun CClusteer 数据服服务指南（适适用于

2、Soolariss OS）SolarissVolumme Mannager 管理指南Sun StoorageTTekCommoon Arrray Maanagerr 软件安装装指南Sun StoorageTTek 61400 阵列硬件件安装指南日 期：2008.111.1硬件环境：管理工作站：无无服务器：2SSUN V4490磁盘阵列：SUUN Storteek 6140软件环境：Solariss 10Sun Cluuster 3.1SunClusster aagent for HHA-OraacleSolariss Voluume Maanagerr主机命名规则：服务器：第一台台V490：w

3、eeb-db11 ；第二台V490：weeb-db22Sun cluuster + oraacle 安安装规划（如如表K-1所示）： 表K-1操作系统 Sun Soolariss 10 05/088集群软件 Sun Cllusterr 3.1卷管理软件Solariss Voluume Maanagerr数据库软件 Oraclee 0节点1 4节点2 5浮动IP地址 66子网掩码255.2555.255.0网关 254IPMP测试IIP地址 21 weeb-db11-ce0-test 22 weeb-db11-ce1-testt 23 weeb-db22-ce0-testt 24 weeb-db

4、22-ce1-testt节点1对应的主主机名web-db11节点2对应的主主机名web-db22Clusterr名称fzpu-cllusterr系统用户oracle (dba组组)浮动IP对应的的主机名web-db一 服务器V4490的安装装： 1.安装前前的规划每台服务器配有有两个1466G的硬盘做raiid1，其中web-db1 有有16G内存做做主节点, web-ddb2有8G内存。系统安装装好之后，两两个节点的分分区一致，避避免出现不可可预料的情况况。按图 1的连接接方式，使wweb-dbb1和web-ddb2同时连连接61400，确保两台台主机都能找找到Storteek 6140内的

5、的硬盘。图1:2.操作系统安安装 操作系统：Soolariss 10注意：在安装操操作系统的过过程中千万要要注意两台主主机都不要接接存储，不然然的话两台主主机的系统盘盘和Storteek 6140的TTargett 号会不一一致，会对以以后的安装产产生影响。安装操作系统EEIS补丁详细步骤3) 按照以下下的规划安装装操作系统wweb-dbb1与web-ddb2相同(表K-2)：由于要安装SCC3.1+ssvm，请预预留系统盘的的第5分区空空间1G，用来建建立/gloobaldeevicess，第七分区区空间5122MB用来放放置metaadb信息 注：/ggloballdevicces - 创

6、建一个5512 兆字字节的文件系系统供sciinstalll实用程序序针对全局设设备使用。（分片7）meeta分区用用于存放卷管管理器的状态态数据库副本本在磁盘的最最后一个分片片上创建一个200 兆字节的的分区供卷管管理器使用。如如果群集使用用VERITTAS Voolume Managger (VVxVM)并并且您要封装装根磁盘，则则需要有两个个未使用的盘盘片以供VxxVM 使用用。表K-2分区号 分区名分区大小 说明 0 / 913225 MMB为分片1 至77 分配空间间后磁盘中剩剩余的空闲空空间。可供SSolariisOS、Sun Clustter 软件件、数据服务务软件、卷管管理器软

7、件、SSunManagemment CCenterr 代理和SSun Cllusterr 模块代理理软件包、根根文件系统以及数据库库和应用程序序软件使用。 1 Swap 16G 2 Overlaap139989 MB整个磁盘 3/var 20G 4/tmp10G 5/globalldevicces1GBSun Cluuster 软件稍后会会给该盘片指指定一个不同同的装载点并并将它装载为一个群集文件件系统。 6未使用 7卷管理器512MBmetadb 专用文件系统和磁盘盘格式 下列汇总是是你当前的文文件系统和磁磁盘格式, 基于你所提提供的信息. 注意: 如如果你选择用用户化, 则则你应该了解解文

8、件系统, 它们在磁盘盘上的期望目目的以及如何何改变它们可可能会影响系系统的操作. 文文件系统/安安装点 硬盘/分分片 大小 = / c11t1d0ss0 913225 MMB sswap c11t1d0ss1 163886 MMB ooverlaap c11t1d0ss2 1399989 MMB /var c11t1d0ss3 204881 MMB /tmp c11t1d0ss4 102445 MMB /globaaldeviices c11t1d0ss5 10333 MMB c11t1d0ss7 516 MMB 4) 设置OBBP变量loocal-mmac-adddresss为truee，在

9、OBPP下：settenvlocall-mac-addreess? ttrue或在在Solarris下：eeepromm locaal-macc-addrress?=true注：（此选项为为solarris 多路路径必须满足足的条件，local-mac-aaddresss? 变量量必须使用EEthernnet 适配配器的默认值值true。对对于以太网适适配器，Suun Cluuster 软件不支持持locall-mac-addreess? 的的值为fallse。此要要求与Sunn Clusster 33.0 不同同，Sun Clustter 3.0 要求llocal-mac-aaddresss

10、? 的值值为falsse。）5) 配置/eetc/hoosts，输输入所有cllusterr节点和逻辑辑主机IP记记录：在两台台主机上配置置好IPMP连接两条ce口口私网线 配置IPMPweb-db11的/etcc/hostts信息# Interrnet hhost ttable#:1 locaalhostt 127.0.00.1 llocalhhost 172.16.99.4 web-ddb1 loghhost 172.16.99.5 web-ddb2#IPMP ttest aaddresss172.16.99.211 web-ddb1-ce0-test172.16.99.222 web-d

11、db1-ce1-test#logic addreess172.16.99.666 web-ddb (全局逻辑辑地址)web-db11 的/ettc/hosstnamee.ce0信息web-db11 netmmask + broaadcastt + grroup iipmp0 up addif wweb-dbb1-ce0-test netmaask + broaddcast + depprecatted -ffailovver uppweb-db11 的/ettc/hosstnamee.ce1信息web-db11-ce1-test netmaask + broaddcast + grooup i

12、ppmp0 ddepreccated -faillover upweb-db22的/etcc/hostts信息rootweeb-db22 # caat /ettc/hossts# Interrnet hhost ttable#:1 locaalhostt 127.0.00.1 llocalhhost 172.16.99.5 wweb-dbb2 logghost web-ddb2.teest.coom172.16.99.4 wweb-dbb1#IPMP ttest aaddresss172.16.99.233 web-ddb2-cee0-tesst172.16.99.244 web-ddb2-c

13、ee1-tesst#logic addreess172.16.99.666 web-ddb (全局逻逻辑地址)web-db22的/etcc/hosttname.ce0信息web-db22 netmmask + broaadcastt + grroup iipmp0 up addif wweb-dbb2-ce00-testt netmmask + broaadcastt + deeprecaated -failoover uupweb-db22的/etcc/hosttname.ce1信息web-db22-ce1-test netmaask + broaddcast + grooup ippmp0

14、 ddepreccated -faillover up以下在两机上完完成6) 修改文件件/etc/defauultrouuter，设设置缺省路由由vi /etcc/defaaultroouter 2547) 修改文件件/etc/systeem，加入以以下3行：eexcludde: loofsset ce:ce_taaskq_ddisablle=1 二Storttek 6140安装装识别.1配置StoorEdgee 6140：详细配置注：StorEEdge 6140共有有10块146GFC硬盘，其其中8个硬盘做RRAID5，剩剩下的2个做hott sparre盘。由于于sun cclusteer

15、需要一个个quoruum盘， OOraclee需使用raaw做文件系系统，所以划划分了三个ppartioon。Quoorum分区区1024MMB即可。让让系统重新扫扫描硬件设备备rootweeb-db11 # reboott - -r 运行cfgaadmaal可以看看见系统已经经注册了控制制器，只需启启用多路径mmpxio即即可。 rootweeb-db11 # cffgadm -alAp_Id TType Recceptaccle Occuppant Coonditiionc0 sscsi-bbus connnecteed confiiguredd unnknownnc0:dskk/c0t0

16、0d0 CCD-ROMM connnecteed confiiguredd unnknownnc1 ffc-priivate connnecteed confiiguredd unnknownnc1:50000cca000432ddcc9 ddisk connnecteed confiiguredd unnknownnc1:50000cca000432ddce1 ddisk connnecteed confiiguredd unnknownnc2 ffc-priivate connnecteed confiiguredd unnknownnc2:2000400a00b82aaaf01 ddis

17、k connnecteed confiiguredd unnknownnc3 ffc-priivate connnecteed confiiguredd unnknownnc3:2000500a00b82aaaf01 ddisk connnecteed confiiguredd unnknownnusb0/1 uusb-moouse connnecteed confiiguredd okkusb0/2 uusb-deevice connnecteed confiiguredd okkusb0/3 uunknowwn emppty unconnfigurred okkusb0/4 uunknow

18、wn emppty unconnfigurred okkrootweeb-db11 # lls -l /dev/fc总数 6lrwxrwxxrwx 1 rooot rooot 51 112月 11日 12:55 fpp0 - ././deviices/ppci8,6000000/SUNNW,qlcc1/fpp0,0:devcttllrwxrwxxrwx 1 rooot rooot 51 112月 11日 12:55 fpp1 - ././deviices/ppci8,6000000/SUNNW,qlcc2/fpp0,0:devcttllrwxrwxxrwx 1 rooot rooot 51 1

19、12月 11日 12:55 fpp2 - ././deviices/ppci9,6000000/SUNNW,qlcc2/fpp0,0:devcttl注：（fp0,fp1为HHBA卡上的的光纤通道,fp2为本本地的光线通通道fp0,fp11开启多路径径，fp2关关闭多路径）rootweeb-db11#vi /kerneel/drvv/fp.cconf 添加如下语句。注释掉 #mpxio-disabble=yyes; parent=/pcii8,6000000/SUNW,qlc11 porrt=0 mmpxio-disabble=nno; nname=fp parent=/pcii8,600000

20、0/SUNW,qlc22 porrt=0 mmpxio-disabble=nno; nname=fp/ fp0,fp1开启启多路径parent=/pcii9,6000000/SUNW,qlc22 porrt=0 mmpxio-disabble=yyes; name=fp/ fp22关闭多路径径注:（多路径软软件用于管理理指向共享群群集存储设备备的多个I/O 路径。对对于Solaaris 88 或Sollaris 9 操作系系统，安装并并配置Sunn StorrEdge Trafffic Maanagerr 软对于SSolariis 10 操作系统，启启用Solaaris 多多路径功能，此此功能

21、作为SSolariis 10 软件的一部部分已被默认认安装。以上表明在HBBA卡FC接口上启启用mpxiio，而不是是全局启用。这样正常阵列设备识别的磁盘号就为长串字符，而本地磁盘识别的磁盘号为正常的cxtxsx，因为只是在FC口局部启用的多路径，而本地禁用多路径）rootweeb-db11# stmmsboott u WARNINGG: Thiis opeeratioon willl reqquire a rebboot.DDo youu wantt to ccontinnue ? y/n (deffault: y) yyThe cchangees willl comme intto eff

22、fect aafter reboooting the ssystemm.Rebooot thhe sysstem nnow ? y/n (deffault: y) yy在web-seerver22上执行相同同的步骤可以看见盘阵已已经变成muultipaath-deevicessrootweeb-db11 # foormatSearchiing foor dissksdoneAVAILABBLE DIISK SEELECTIIONS: 0. c11t0d0 /ppci9,6000000/SUNNW,qlcc2/fpp0,0/ssdww5000ccca004432dccc9,0 1. c11t1d

23、0 /ppci9,6000000/SUNNW,qlcc2/fpp0,0/ssdww5000ccca004432dcee1,0 2. c44t600AA0B800002A2B32000000666F492BB138Ddd0 /sscsi_vvhci/sssdg6600a0bb800022a2b32000000666f492bb138d 3. c44t600AA0B800002AAFF000000007BFF492B1135Cd00 /sscsi_vvhci/sssdg6600a0bb800022aaf0000000007bf4992b1355c 4. c44t600AA0B800002AAFF0

24、00000007C55492B113D6d00 /sscsi_vvhci/sssdg6600a0bb800022aaf0000000007c54992b13dd6Specifyy diskk (entter itts nummber):rootweeb-db22 # foormatSearchiing foor dissksdoneAVAILABBLE DIISK SEELECTIIONS: 0. c11t0d0 /ppci9,6000000/SUNNW,qlcc2/fpp0,0/ssdww2100000008778d59aa1,0 1. c11t1d0 /ppci9,6000000/SUNN

25、W,qlcc2/fpp0,0/ssdww2100000008778d0eff5,0 2. c44t600AA0B800002A2B32000000666F492BB138Ddd0 /sscsi_vvhci/sssdg6600a0bb800022a2b32000000666f492bb138d 3. c44t600AA0B800002AAFF000000007BFF492B1135Cd00 /sscsi_vvhci/sssdg6600a0bb800022aaf0000000007bf4992b1355c 4. c44t600AA0B800002AAFF000000007C55492B113D6d

26、00 /sscsi_vvhci/sssdg6600a0bb800022aaf0000000007c54992b13dd6三Clustter 软件件安装配置1.Suun软件的安安装双机软件采用ssun公司的的sun cclusteer3.1 ，此软件已已经集成到JJES（Jaava Ennterprrise SSystemm）软件包中中。cd /varr/spoool/staage/JEES_05QQ4/Sollaris_sparcc可通过运行以下下命令进行安安装：GUI modde:./iinstalllerCLI modde:./iinstalller -nodissplay2. Sun C

27、lustter环境配配置两个节点通讯用用rootweb-ddb1 # vi .rrhostss +rootweeb-db11 # vii /etcc/hostts.equuivweb-db11web-db22web-db 3，打EIS补补丁软件安装完毕之之后，也需要要打补丁。不不过sun clustter安装完完毕之后，系系统默认已经经启动服务，安安装补丁之前前需停用suun cluuster服服务。（两个节点点上做）安装完毕后，执执行reboot - -xx 重启之后不进入入sun cclusteer环境安装SC3.11的patchhes；rootweeb-db11 # loofiadmm

28、-a /opt/iso/eeis-dvvd.isoo /deev/loffi/1rootweeb-db11 # loofiadmm Block DDevicee Fiile/dev/loofi/1 /oopt/isso/eiss-dvd.isorootweeb-db11 # moount -F /deev/loffi/1 /mnt/iiso/rootweeb-db11 # moount -F hsffs /deev/loffi/1 /mnt/iiso/rootweeb-db11 # cdd /mnnt/isoo/sun/instaallrootweeb-db11 # ./setupp-stan

29、ndard.shinit 6 重启系统。rootweeb-db11 # unnpack-patchhes注：（进入cllusterr补丁包的目目录，用这个个命令一次打打EIS补丁丁集）然后执行命令 init 6 重启系系统。在web-dbb2上执行以上相同的步步骤4.Scinttall 配配置配置主节点weeb-db11 具体内容摘录:rootweeb-db11 # scinsstall * 主主菜单 * 请选择择以下某一带带 (*) 的选项： * 1) 安安装群集或群群集节点 2) 将将群集配置为为从此安装服服务器中快速速启动 3) 在在此群集节点点中添加对新新数据服务的的支持 4) 升升级

30、此群集节节点 5) 打打印此群集节节点的发行信信息 * ?) 菜菜单选项中的的帮助 * q) 退退出 选项： 1 * 安安装菜单 * 请选择择以下任一选选项： 1) 安安装新群集的的所有节点 2) 只只将此机器安安装为新群集集的第一个节节点 3) 将将此机器添加加为现有群集集中的节点 ?) 菜菜单选项中的的帮助 q) 返返回主菜单 选项： 2 * 只只安装新群集集的第一个节节点 * 此选项项用于建立新新的群集，该该群集使用此此机器作为其其第一个节点点。 安装群群集框架软件件之后，系统统将要求您输输入群集的名名称。 然后后，您可以运运行 scccheck(1M) 来测测试此机器是是否满足 SSu

31、n Cllusterr 预配置的的基本要求。 scccheck(1M) 通过过后，系统将将要求您输入入最初将加入入该群集的其其他节点的名名称 。除非非此群集为单单节点群集，否否则系统还将将要求您输入入某些群集传传输配置信息息 。 可以随随时按 Coontroll-d 组合合键返回 主主菜单。 是否要要继续 (yyes/noo) yees? y 安安装类型 群群集名 检检查 群群集节点 群群集节点 Typpe of Instaallatiion Autoddiscovvery oof Cluuster Transsport Doo you want to usse auttodisccovery

32、y (yess/no) yes?y9) Do yoou wannt sciinstalll to rebooot forr you (yes/no) yes? y 5.执行命令 scstaat p 检查确认所所有clusster节点点都处于onnline状状态；具体内容摘录:rootweeb-db11 # sccstat -p Clusster NNodes - Noode naame Sttatus Clustter noode: weeb-db11 Onliine Clustter noode: weeb-db22 Onlinne Clusster TTranspport PPaths -

33、 Enndpoinnt Enndpoinnt Sttatus Transsport path: weeb-db11:ce1 WEB-DB2:cce1 PPath oonlinee Transsport path: weeb-db11:ce0 WEB-DB2:cce0 PPath oonlinee Quorrum Suummaryy - Quoruum vottes poossiblle: 1 Quoruum vottes neeeded: 1 Quoruum vottes prresentt: 1- Quorrum Vootes bby Nodde - Noode Naame Prresent

34、t Posssible Statuus Node votess: weeb-db11 1 1 Onnline Node votess: weeb-db22 0 00 Onlline- Quorrum Vootes bby Devvice Deevice Name Prresentt Posssible Statuus Deviice Grroup SServerrs - Deevice Groupp Prrimaryy Seecondaary Deviice Grroup SStatuss - Deevice Groupp Sttatus - Multti-ownner Deevice Gro

35、upps - Devvice GGroup Onlline SStatuss IPMPP Grouups Nodde Namme Grooup Statuus Adaptter Statuus IPMP Groupp: webb-db1 iipmp0 Onlline ce33 Onlline IPMP Groupp: webb-db1 ipmmp0 Onlinne ce2 Onlinne6重新检测所所有的节点上上配置IPMMP 是否配配好rootweeb-db11 # iffconfiig -alo0: fllags=220010000849 mmtu 82232 inndex 11 inet

36、t 127.0.0.11 netmmask fff0000000 ce0: fllags=110008443 mmtu 15500 inndex 22 inett 172.16.999.4 neetmaskk fffffff00 broaddcast 172.116.99.255 grouupnamee ipmpp0 etheer 0:114:4f:44:55:caa ce0:1: flagss=90400843 mttu 15000 inddex 2 inett 172.16.999.21 nnetmassk fffffff000 broaadcastt 172.16.999.255ce1:

37、 fllags=990408443 mtu 1500 indexx 3 inett 172.16.999.22 nnetmassk fffffff000 broaadcastt 172.16.999.255 grouupnamee ipmpp0 etheer 0:114:4f:67:3c:92 ce1:1: flagss=10400843 mtuu 15000 indeex 3 inett 172.16.999.66 nnetmassk fffffff000 broaadcastt 172.16.999.255ce2: fllags=110088443 mtuu 15000 indeex 5

38、inett 129 neetmaskk fffffff80 broaddcast 555 etheer 0:114:4f:85:e6:377 ce3: fllags=110088443 mtuu 15000 indeex 4 inett 1 netmmask ffffffff80 brroadcaast 27 etheer 0:114:4f:85:e6:366 clprivnnet0: flagss=10099843 mtu 1500 indexx 6 inett 10.110.1933.1 neetmaskk fffffff00 broaddcast 10.100.193.255 ethee

39、r 0:00:0:0:0:17.设置quoorum ddisk盘在所有节点执行行命令scddidadmm L 查查看硬盘IDD，选择两Cllusterr节点主机都都能看到的硬硬盘ID；具体内容摘录:查看共享磁磁盘设备(sse 61440)的全局局设备号（ddid）。DD4 为quoorum盘、dd5，D6 为RRAW设备。DD7为备用rootweeb-db11 # sccdidaddm -LL1 webb-db1:/dev/rdsk/c0t0dd0 /ddev/diid/rdssk/d1 2 webb-db1:/dev/rdsk/c1t1dd0 /ddev/diid/rdssk/d2 3 we

40、bb-db1:/dev/rdsk/c1t0dd0 /ddev/diid/rdssk/d3 4 web-db1:/dev/rrdsk/cc4t6000A0B800002AAAF000000007CC5492BB13D6dd0 /deev/didd/rdskk/d4 4 webb-db2:/dev/rdsk/c4t6000A0B880002AAAF0000000077C54922B13D66d0 /ddev/diid/rdssk/d4 5 webb-db1:/dev/rdsk/c4t6000A0B800002A2B32000000666F492BB138Ddd0 /deev/didd/rdskk/

41、d5 5 webb-db2:/dev/rdsk/c4t6000A0B800002A2B32000000666F492BB138Ddd0 /deev/didd/rdskk/d5 6 webb-db1:/dev/rdsk/c4t6000A0B880002AAAF0000000077BF4922B135CCd0 /ddev/diid/rdssk/d6 6 webb-db2:/dev/rdsk/c4t6000A0B880002AAAF0000000077BF4922B135CCd0 /ddev/diid/rdssk/d6 7 webb-db2:/dev/rdsk/c0t0dd0 /ddev/diid/

42、rdssk/d7 8 webb-db2:/dev/rdsk/c1t0dd0 /ddev/diid/rdssk/d8 9 webb-db2:/dev/rdsk/c1t1dd0 /ddev/diid/rdssk/d9 2)在节点1，执执行命令sccsetupp指定d6作为quorrum diisk盘Is it ookay tto conntinuee (yess/no) yes? yessWhichh globbal deevice do yoou wannt to use (d)? D6Is itt okayy to pproceeed witth thee updaate (yyes/noo)

43、 yees? yesDo you wwant tto addd anotther qquorumm diskk (yess/no)? no注：（查询磁盘盘号d6的容容量10244M，作为我我们先前设定定的quorrum diisk）Is itt okayy to rreset “instaallmodde” (yess/no) yes? yes8 。加入所有有私网IP地址到/ettc/hossts, 可可以通过如下下方式获取私私网IP地址 # grepp ip_aaddresss /ettc/cluuster/ccr/iinfrasstructture每个IP地址必必须指定唯一一的主机名，建建

44、议如下命名名：rootweeb-db11 # grrep ipp_addrress /etc/cclusteer/ccrr/peertiess.ip_aaddresss 110.10.0.1299peertiess.ip_aaddresss 110.10.1.1peertiess.ip_aaddresss 110.10.0.1300peertiess.ip_aaddresss 110.10.1.2四.磁盘资源配配置1.在所有节点点上修改文件件/kernnel/drrv/md.conf，修修改nmd的的值为：maax: nmmd=10224注：（在Sollaris 10 版本本中，Sollari

45、s Volumme Mannager 的功能已得得到增强，它它可以动态配配置卷。不再再需要编辑/kerneel/drvv/md.cconf 文文件中的nmmd 和mdd_nsetts 参数。根根据需要动态态创建新卷。）2. 重启所有有节点重新识识别设备：scshuutdownn ; booot -rr3 .在所有节节点运行命令令：scgddevs第二块硬盘同步步第一块的磁磁盘分区信息息注：（在安装ssolariis 时本地地第二块硬盘盘可不分区）prtvtocc /devv/rdskk/c1t00d0s2 | fmtthard -s - /dev/rdsk/c1t1dd0s2创建转台数据库库副

46、本，至少少要有3个状状态数据库副副本metadb a f -c 3 c1t0dd0s7meetadb a f -c 3 c1t11d0s74.在主节点上上镜像本地硬硬盘： metaiinit f d1001 1 11 c1t00d0s0mmetainnit d102 1 1 c1t1d0s0meetainiit d100 m d1001metaainit f d1004 1 11 c1t00d0s1mmetainnit d1105 1 1 c1t11d0s1mmetainnit d1103 m d1004metaainit f d1007 1 11 c1t00d0s3metainiit d10

47、08 1 11 c1t11d0s3metaiinit dd106 m d1007metainiit f d1110 1 11 c1t00d0s4metainiit d111 1 1 cc1t1d00s4metainiit d1009 m d1110metainiit f d1113 1 11 c1t00d0s5metainiit d114 1 1 cc1t1d00s5metainiit d1112 m d1113metarooot d1000注 （在这里我我们创建本地地两块磁盘的的RAID11卷，分别是是d100,d103,d106,d109,dd112,其其中d1000为根盘的镜镜像卷，本地

48、地metaddevicee的设备号用用100以上上的，切在做做另一个节点点是设备好不不能与此重复复）5.修改文件/etc/vvfstabb中对应的记记录：roootwebb-db1 # catt /etcc/vfsttab#devicee deviice mmount FS fsck moount mounnt#to mounnt tto fscck pooint ttype passs at booot opptionss# fd - /dev/ffd fd - noo -/proc - /proc prooc - noo -/dev/mdd/dsk/d103 - - swwap - nno

49、 -/dev/mdd/dsk/d100 /deev/md/rdsk/d100 / uufs 1 no -/dev/mdd/dsk/d106 /deev/md/rdsk/d106 /varr uufs 1 no -#/dev/ddsk/c11t0d0ss5 /deev/rdssk/c1tt0d0s55 /gloobaldeevicess ufss 2 yees -/dev/mdd/dsk/d109 /deev/md/rdsk/d109 /tmpp uufs 2 yes -/devicees - /deevicess deevfs - nno -ctfs - /systeem/conntractt

50、 cttfs - nno -objfs - /systeem/objject objfss - no -/dev/mdd/dsk/d112 /dev/md/rddsk/d1112 /ggloball/.devvices/node1 ufss 2 noo globbal6.sync ; iniit 07.在OK状态态，设置引导导顺序OK devaaliasOk Nvallias diskmmirr /pci9,6000000/SSUNW,qqlc2/fp0,0/ssddw50000cca000432ddce1,00:aOk nvsttoreOk seteenv booot-deevice dis

51、k diskmmirr nnet8. 重启后，使使镜像挂上卷卷metattaach d1100 d1102mettattacch d1003 d1005metaattachh d1066 d1088metattaach d1109 d1111metattaach d1112 d11149.在备节点上上镜像本地硬硬盘metainiit f d2001 1 11 c1t00d0s0mmetainnit d202 1 1 c1t1d0s0meetainiit d2000 m d2001metaainit f d2004 1 11 c1t00d0s1mmetainnit d2205 1 1 c1t11

52、d0s1mmetainnit d2203 m d2004metaainit f d2007 1 11 c1t00d0s3metainiit d208 1 1 c1t11d0s3metaiinit dd206 m d2007metainiit f d1110 1 11 c1t00d0s4metainiit d111 1 1 cc1t1d00s4metainiit d2009 m d2110metainiit f d1113 1 11 c1t00d0s5metainiit d214 1 1 c1t11d0s5metainiit d2112 m d2113metarooot d2000注：（本地me

53、etadevvice的设设备号用200以上的的，并不要和和主节点的mmetadeevice重重复，在这里里我们创建本本地两块磁盘盘的RAIDD1卷，分别别是d2000,d2033,d2066,d2099,d2122,其中d2200为根盘盘的镜像卷，）10.修改文件件/etc/vfstaab中对应的的记录：rootweeb-db22 # caat /ettc/vfsstab#devicee deviice mmount FS fsck moount mounnt#to mounnt tto fscck pooint ttype passs at booot opptionss# fd - /de

54、v/ffd fd - noo -/proc - /proc prooc - noo -/dev/mdd/dsk/d203 - - swwap - nno -/dev/mdd/dsk/d200 /deev/md/rdsk/d200 / uufs 1 no -/dev/mdd/dsk/d206 /deev/md/rdsk/d206 /varr uufs 1 no -#/dev/ddsk/c11t0d0ss5 /deev/rdssk/c1tt0d0s55 /gloobaldeevicess ufss 2 yees -/dev/mdd/dsk/d209 /deev/md/rdsk/d209 /tmpp

55、 uufs 2 yes -/devicees - /deevicess deevfs - nno -ctfs - /systeem/conntractt cttfs - nno -objfs - /systeem/objject objfss - no -/dev/mdd/dsk/d212 /dev/md/rddsk/d2212 /ggloball/.devvices/node2 ufss 2 noo globbal11.syncc ; innit 012.在OK下下：seteenv booot-deevice rootddisk rrootmiirr，然后后重启mettattacch d20

56、00 d2002metaattachh d2033 d2055metatttach d206 d208metattaach d2209 d2211metattaach d2212 d221413.在所有节节点上添加如如下一行到文文件/etcc/systtem里：sset mdd:mirrrored_root_flag=1 查看mettadb库信信息 roootwebb-db1 # mettadb flaggs firrst bllk bllock ccount a m p luo 16 81192 /dev/ddsk/c11t0d0ss7 a p luo 82008 81192 /dev/dd

57、sk/c11t0d0ss7 a p luo 164400 81192 /dev/ddsk/c11t0d0ss7 a p luo 16 81192 /dev/ddsk/c11t1d0ss7 a p luo 82008 81192 /dev/ddsk/c11t1d0ss7 a p luo 164400 81192 /dev/ddsk/c11t1d0ss7rootweb-ddb2 # metaddb flaggs firrst bllk bllock ccount a m p luo 16 81192 /dev/ddsk/c11t0d0ss7 a p luo 82008 81192 /dev/dds

58、k/c11t0d0ss7 a p luo 164400 81192 /dev/ddsk/c11t0d0ss7 a p luo 16 81192 /dev/ddsk/c11t1d0ss7 a p luo 82008 81192 /dev/ddsk/c11t1d0ss7 a p luo 164400 81192 /dev/ddsk/c11t1d0ss714.在第一一个节点上，用用did设备备建立共享硬硬盘组和meeta设备：1)创建磁盘盘集ora_datammetaseet-sora_ddata -a -h weeb-db11 webb-db2注：（关于不能能使用-M项项，-M是用用来创建多属属主

59、主机磁盘盘的，就是在在同一时间两两节点都可以以对磁盘集有有读写的权限限，这是suun cluuster for OORACLEE RAC的的东西，要满满足一定要件件才能创建成成功）metasett: 只允许许在多属主磁磁盘集上使用用 -M 选选项用法: mmetaseet -s 集名称 -a -AA enabble | disabble -h 主机名名. metaaset -s 集名称称 -a -M -h 主机名名. metaaset -s 集名称称 -a -M -l 长度度 -LL 驱动器器名称 metaaset -s 集名称称 -d -M -h 主机名名. metaaset -s 集名称称

60、 -d -M -f -h 所有主机名名 metaaset -s 集名称称 -d -M -f 驱驱动器名称 metaaset -s 集名称称 -d -M -f 主主机名 metaaset -s 集名称称 -A eenablee | diisablee metaaset -s 集名称称 -t -f metaaset -s 集名称称 -r metaaset -s 集名名称 -jj -M metaaset -s 集名名称 -ww -M metaaset -s 集名称称 -P -M metaaset -s 集名称称 -b -M metaaset -s 集名称称 -o -M -h 主机机名 metaase