广东移动onesdp系统mdspcgw1数据库vcs健康检查报告

1、Business Critical Servi移动 OneSDP 系统 mdspCGW1 数据库VCS 集群健康检查Prepared By:Parco Liu Last Updated:2014-5-15目录1.介绍3对象3目的3范围3术语3结果31.11.21.31.41.52.客户环境43.VCS 健康检查项目5License Key 检查5GAB port 检查5VCS 心跳网络检查6VCS 日志检查6VCS Cluster 节点及 Service Group 运行状态检查6VCS 进程检查7VCS 配置文件的一致性检查7文件系统使用状况检查93.13.23.33.43.53.63.73

2、.84.结论91.介绍1.1对象本文档是用来辅助 Symantec Business Critical Servi户。的顾问和 VCS/NBU 的用1.2目的本文档用于评估目前移动 OneSDP 系统 mdspCGW1 数据库 VCS 集群的配置和运行状态是否良好。1.3范围本文档的范围限制在检查 VCS 产品.1.4术语HACluster VCS VXVM VXFS CVM CFSSFRACHigh AvailabilityA logical grouof servers (nodes) providing failover capabilityVERITAS Cluster Server

3、VERITAS Volume Manager VERITAS File System Cluster Volume Manager Cluster File SystemVERITAS Storage Foundation for RAC (包括 VCS 和 VXVM,支持 Oracle RAC)NetBackupNBU1.5结果通过系列健康检查项目的成功完成，验证 VCS 当前配置和运行状态是否良好。2.客户环境移动 OneSDP 系统 mdspCGW1 数据库 VCS 集群由 2 台 LINUX 服务器组成，系统环境如下：系统健康检查时间：2014 年 5 月 15 日symantec 工

4、程师:用户工程师:参加刘扳浩主机名操作系统版本管理ORACLE 版本mdspCGW1ASUSE11 SP1mdspCGW1BSUSE11 SP13.VCS 健康检查项目通过以下 8 个检查项目，确认 mdspCGW1A 和 mdspCGW1B 两主机上的 VCS 进程、配置、运行状况以及性能等都处于良好的状态。3.1 License Key 检查需要确认两节点上的 License Key 都为License。非License Key 过期后，一旦系统重启， VCS 进程将无法正常启动。在生产系统上，要避免使用Demo License.使用 vxlicrep 命令可以检查 License 的类型

5、.以下为Licenses 的输出：的检查主机检查结果：VERITAS Cluster Server 的License key 为。3.2 GAB port 检查VCS 的正常运行，有赖于各包含模块的正常运行。使用主机上运行了那些模块，以下是gabconfig a 输出：gabconfiga 命令可检查检查结果： GAB Port 特性均正常。3.3 VCS 心跳网络检查VCS 通过心跳网络传递 cluster 状态信息，当前的每个VCS 节点都配置了两条心跳线。VCS 心跳网络运行 LLT/GAB 协议，跳网络是否正常, 检查输出如下:可以通过检查 LLT 的状态来确认心mdspCGW1A:

6、# llts-nvv LLT node information:NodeSeLink Sus Address* 0 mdspCGW1AOPENeth10UP80:FB:06:35:B7:43 eth9UP80:FB:06:35:B7:45 eth8UP80:FB:06:35:B7:441 mdspCGW1BOPENeth10UP80:FB:06:35:B8:B7 eth9UP80:FB:06:35:B8:B9 eth8UP80:FB:06:35:B8:B8mdspCGW1A: # gabconfig -a GAB Port Memberships=Port a gen291e01 member

7、ship 01 Port h gen291e03 membership 01Product Name= VERITAS Cluster ServerLicense Type= PERMANENT检查结果：节点的心跳网络是健康的。3.4 VCS 日志检查检查 VCS 的日志文件， 察看近期是否有异常/var/VRTSvcs/log/engine_A.log ，可以在 database看 log 文件的修改时间和察看最近有没有异常状况。信息。VCS 日志文件是的 VRTSexplorer的包中来查检查结果：VCS 日誌近期无异常信息。3.5 VCS Cluster 节点及 Service Grou

8、p 运行状态检查检查 2 个节点的 VCS 运行状态以及所有的Service Group 运行状态，如下：从以上输出可以看出，mdspCGW1A、 mdspCGW1B 都在一个 Cluster 集群内，运行状态正常，都为 RUNNING 状态；各个资源组正常。mdspCGW1A: # hasus -summary- SYSTEM SE- SystemSeFrozenA mdspCGW1ARUNNING0mdspCGW1BRUNNING0- GROUP SE- GroupSystemProbedAutoDisabledSeonesdp_cgw_rg mdspCGW1AY NONLINEB one

9、sdp_cgw_rg mdspCGW1BY NOFFLINEB onesdp_faultspy_rg mdspCGW1A Y N ONLINE B onesdp_faultspy_rg mdspCGW1BY NONLINE B onesdp_nic_rg mdspCGW1AY NONLINEB onesdp_nic_rg mdspCGW1BY NONLINEB onesdp_notifymng_rg mdspCGW1AY NONLINE B onesdp_notifymng_rg mdspCGW1BY NOFFLINE2014/05/15 11:00:13 VCS INFO V-16-2-13

10、716 (mdspCGW1A) Resource(onesdp_cgw_app): Output of the completed operation (monitor)=rcscgw227701 ?07:40:06 mdspmon=2014/05/15 11:00:23 VCS INFO V-16-2-13716 (mdspCGW1A) Resource(onesdp_cgw_app): Output of the completed operation (monitor)=rcscgw227701 ?07:40:06 mdspmon=2014/05/1511:00:31VCSERRORV-

11、16-1-0(mdspCGW1B)OneSDPCGWApp:?:?:CGWApp:onesdp_cgw_app:monitor:CGWApp(rcscgw)seis abnormal!2014/05/15 11:00:33 VCS INFO V-16-2-13716 (mdspCGW1A) Resource(onesdp_cgw_app): Output of the completed operation (monitor)=rcscgw227701 ?07:40:06 mdspmon=检查结果：运行正常。3.6 VCS 进程检查主要检查 VCS进程had 和hashadow 是否存在，参数

12、是否正确。检查结果：had 和hadshadow 进程正常。3.7 VCS 配置文件的一致性检查检查 VCS 配置文件/etc/VRTSvcs/conf/config/main.cf 的一致性，结果应无错误信息。检查输出如下：mdspCGW1A: # hacf -verify /etc/VRTSvcs/conf/config检查结果：VCS 的配置文件main.cf 通过一致性检查。main.cf 配置文件内容如下：mdspCGW1A: # cat /etc/VRTSvcs/conf/config/main.cf include OracleASMTypes.cfinclude types.c

13、f include Db2udbTypes.cf include OracleTypes.cf include MDSPTypes.cf include FaultSpy.cf include SybaseTypes.cfcluster clumdsp02 (UserNames = admin = dOPhOJoLPkPPnXPjOM ClusterAddress = 192.168.131.59 Administrators = admin )system mdspCGW1A (ShutdownTimeout = 3600)system mdspCGW1B (ShutdownTimeout

14、= 3600)group onesdp_cgw_rg (SystemList = mdspCGW1A = 1, mdspCGW1B = 2 AutoStartList = mdspCGW1A, mdspCGW1B )IP onesdp_cgw_base_ip (Critical = 0 Device = eth8Address = 192.168.105.98NetMask = 255.255.255.0)IP onesdp_cgw_ip (Device = bond1Address = 192.168.131.59root128191 0 2012 ?00:23:32 /opt/VRTSvc

15、s/bin/hadroot128211 0 2012 ?00:00:00 /opt/VRTSvcs/bin/hashadowNetMask = 255.255.255.0)OneSDPCGWApp onesdp_cgw_app ( ResourceOwner = unknown UserName = rcscgw)Proxy onesdp_cgw_base_nic (ResName = onesdp_base_nic)Proxy onesdp_cgw_fabric_nic (ResName = onesdp_fabric_nic)onesdp_cgw_app requires onesdp_c

16、gw_base_ip onesdp_cgw_app requires onesdp_cgw_ip onesdp_cgw_base_ip requires onesdp_cgw_base_nic onesdp_cgw_ip requires onesdp_cgw_fabric_nic/resource dependency treegroup onesdp_cgw_rgOneSDPCGWApp onesdp_cgw_appIPonesdp_cgw_base_ipProxy onesdp_cgw_base_niconesdp_cgw_ipProxy onesdp_cgw_fabric_nicIPg

17、roup onesdp_faultspy_rg (SystemList = mdspCGW1A = 1, mdspCGW1B = 2 Parallel = 1AutoStartList = mdspCGW1A, mdspCGW1B )OneSDPFaultSpy onesdp_faultspy ( ResourceOwner = unknown FaultClearResGrps=onesdp_nic_rg )onesdp_cgw_rgonesdp_notifymng_rg/ resource dependency tree/group onesdp_faultspy_rgOneSDPFaul

18、tSpy onesdp_faultspygroup onesdp_nic_rg (SystemList = mdspCGW1A = 1, mdspCGW1B = 2 Parallel = 1AutoStartList = mdspCGW1A, mdspCGW1B )3.8 文件系统使用状况检查使用 df 检查文件系统使用的状况，输出如下：mdspCGW1A:/tmp/ruibao # df -hFilesystemSize Used Avail Use% Mounted on/dev/sda220G 7.3G12G 39% /devtmpfs12G 156K12G1% /devtmpfs12G012G0% /dev/shm/dev/sda650G26G21G 56% /home/dev/sda540G 2.3G36G6% /optNIC onesdp_base_nic (Device = eth8 Mii =