广东移动ndmc系统ndmcdb03和ndmcdb04数据库vcs健康检查报告

1、Business Critical Servi移动 NDMC 系统 NDMCDB03 和 NDMCDB04 数据库 VCS 健康检查Prepared By:Parco Liu Last Updated:2014-2-19目录1.介绍3对象3目的3范围3术语3结果31.11.21.31.41.52.客户环境43.VCS 健康检查项目5License Key 检查5GAB port 检查5VCS 心跳网络检查5VCS 日志检查6VCS Cluster 节点及 Service Group 运行状态检查6VCS 进程检查7VCS 配置文件的一致性检查7文件系统使用状况检查93.13.23.33.43.

2、53.63.73.84.结论91.介绍1.1对象本文档是用来辅助 Symantec Business Critical Servi户。的顾问和 VCS/NBU 的用1.2目的本文档用于评估移动 NDMC 系统 NDMCDB03 和 NDMCDB04 数据库目前 VCS 集群的配置和运行状态是否良好。1.3范围本文档的范围限制在检查 VCS 产品.1.4术语HACluster VCS VXVM VXFS CVM CFSSFRACHigailabilityA logical grouof servers (nodes) providing failover capabilityVERITAS Cl

3、uster Server VERITAS Volume Manager VERITAS File System Cluster Volume Manager Cluster File SystemVERITAS Storage Foundation for RAC (包括 VCS 和 VXVM,支持 Oracle RAC)NetBackupNBU1.5结果通过系列健康检查项目的成功完成，验证 VCS 当前配置和运行状态是否良好。2.客户环境移动 NDMC 系统 NDMCDB03 和 NDMCDB04 数据库 VCS 集群由 2 台LINUX 服务器组成，系统环境如下：系统健康检查时间：2014

4、 年 2 月 19 日symantec 工程师:用户工程师:参加刘扳浩主机名操作系统版本管理软件ORACLE 版本NDMCDB03SUSE10 SP2NDMCDB04SUSE10 SP23.VCS 健康检查项目通过以下 8 个检查项目，确认 NDMCDB03 和 NDMCDB04 两主机上的 VCS 进程、配置、运行状况以及性能等都处于良好的状态。3.1 License Key 检查需要确认两节点上的 License Key 都为License。非License Key 过期后，一旦系统重启， VCS 进程将无法正常启动。在生产系统上，要避免使用Demo License.使用 vxlicrep

5、 命令可以检查 License 的类型.以下为Licenses 的输出：的检查主机检查结果：VERITAS Cluster Server 的License key 为。3.2 GAB port 检查VCS 的正常运行，有赖于各包含模块的正常运行。使用主机上运行了那些模块，以下是gabconfig a 输出：gabconfiga 命令可检查检查结果： GAB Port 特性均正常。3.3 VCS 心跳网络检查VCS 通过心跳网络传递 cluster 状态信息，当前的每个VCS 节点都配置了两条心跳线。VCS 心跳网络运行 LLT/GAB 协议，跳网络是否正常, 检查输出如下:可以通过检查 LLT

6、 的状态来确认心NDMCDB03: # gabconfig -a GAB Port Memberships=Port a gen61ef02 membership 01 Port h gen61ef04 membership 01Product Name= VERITAS Cluster ServerLicense Type= PERMANENTProduct Name= VERITAS File SystemLicense Type= PERMANENTProduct Name= VERITAS Volume ManagerLicense Type= PERMANENTProduct Nam

7、e= VERITAS Storage Foundation Standard HALicense Type= PERMANENTProduct Name= VERITAS Database Edition for OracleLicense Type= PERMANENTProduct Name= VERITAS SANPoControlLicense Type= PERMANENT检查结果：节点的心跳网络是健康的。3.4 VCS 日志检查检查 VCS 的日志文件， 察看近期是否有异常/var/VRTSvcs/log/engine_A.log ，可以在 database看 log 文件的修改时

8、间和察看最近有没有异常状况。信息。VCS 日志文件是的 VRTSexplorer 的包中来查检查结果：VCS 日誌近期无异常信息。3.5 VCS Cluster 节点及 Service Group 运行状态检查检查 2 个节点的 VCS 运行状态以及所有的Service Group 运行状态，如下：从以上输出可以看出，NDMCDB03、 NDMCDB03 都在一个 Cluster 集群内，运行状态正常，都为 RUNNING 状态；各个服务组状态正常。检查结果：运行正常。NDMCDB03: # hasus -summary- SYSTEM SE- SystemSeFrozenA NDMCDB03

9、RUNNING0NDMCDB04RUNNING0- GROUP SE- GroupSystemProbedAutoDisabledSeRCS_DB_SGNDMCDB03YNONLINEB RCS_DB_SGNDMCDB04YNOFFLINE2014/02/18 13:48:30 VCS INFO V-16-1-53504 VCS Engine Alive message!2014/02/18 17:48:31 VCS INFO V-16-1-53504 VCS Engine Alive message!2014/02/18 21:48:32 VCS INFO V-16-1-53504 VCS

10、Engine Alive message!2014/02/19 01:48:33 VCS INFO V-16-1-53504 VCS Engine Alive message!2014/02/19 05:48:34 VCS INFO V-16-1-53504 VCS Engine Alive message!2014/02/19 09:48:35 VCS INFO V-16-1-53504 VCS Engine Alive message!NDMCDB03: # llts-nvv LLT node information:NodeSeLink Sus Address* 0 NDMCDB03OP

11、ENeth10UP80:FB:06:35:F2:6D eth9UP80:FB:06:35:F2:6F eth8UP80:FB:06:35:F2:6E1 NDMCDB04OPENeth10UP80:FB:06:35:B7:7F eth9UP80:FB:06:35:B7:81 eth8UP80:FB:06:35:B7:803.6 VCS 进程检查主要检查 VCS进程had 和hashadow 是否存在，参数是否正确。检查结果：had 和hadshadow 进程正常。3.7 VCS 配置文件的一致性检查检查 VCS 配置文件/etc/VRTSvcs/conf/config/main.cf 的一致性，

12、结果应无错误信息。检查输出如下：NDMCDB03: # hacf -verify /etc/VRTSvcs/conf/config检查结果：VCS 的配置文件main.cf 通过一致性检查。main.cf 配置文件内容如下：NDMCDB03: # cat /etc/VRTSvcs/conf/config/main.cf include types.cfinclude OracleTypes.cfcluster ndmcdb3 (UserNames = admin = ajkCjeJgkFkkIskEjh Administrators = admin )system NDMCDB03 (Shut

13、downTimeout = 3600)system NDMCDB04 (ShutdownTimeout = 3600)group RCS_DB_SG (SystemList = NDMCDB03 = 0, NDMCDB04 = 1 AutoStartList = NDMCDB03, NDMCDB04 )Application ora_raw (StartProgram = /opt/HWraw_ora/bin/raw_start.sh StopProgram = /opt/HWraw_ora/bin/raw_stop.sh CleanProgram = /opt/HWraw_ora/bin/r

14、aw_clean.sh MonitorProgram = /opt/HWraw_ora/bin/raw_monitor.sh Monitorerval = 30MonitorTimeout = 30)Application ora_vg (StartProgram = /opt/HWvg_ora/bin/vg_start.sh StopProgram = /opt/HWvg_ora/bin/vg_stop.sh CleanProgram = /opt/HWvg_ora/bin/vg_clean.sh MonitorProgram = /opt/HWvg_ora/bin/vg_monitor.s

15、h Monitorerval = 30MonitorTimeout = 30)IP ora_ip (Device = bond1root128561 0 Mar23 ?00:33:01 /opt/VRTSvcs/bin/hadroot128611 0 Mar23 ?00:00:00 /opt/VRTSvcs/bin/hashadowAddress = 192.168.130.52NetMask = 255.255.255.0OnlineRetryLimit = 3)Mount ora_archive (MountPo= /home/oracle/archive BlockDevice = /d

16、ev/mapper/vgopt-lvarchive FSType = reiserfsFsckOpt = -y)NIC ora_nic (Device = bond1)Netlsnr ora_listener (Owner = oracleHome = /opt/oracle/product/11g/dbTnsAdmin = /opt/oracle/product/11g/db/network/admin Listener = listener)Oracle ora_ora11g (Sid = NDMCDBOwner = oracleHome = /opt/oracle/product/11g

17、/db)ora_archive requires ora_raw ora_ip requires ora_nic ora_listener requires ora_archive ora_ora11g requires ora_listener ora_raw requires ora_vgora_vg requires ora_ip/resource dependency treegroup RCS_DB_SGOracle ora_ora11gNetlsnr ora_listenerMount ora_archiveApplication ora_rawApplication ora_vgIP ora_ipNIC ora_nic3.8 文件系统使用状况检查使用 df 检查文件系统使用的状况，输出如下：检查结果：可以看到各个文件系统空间使用率良好。在日常中需要注意避免使用率达到 100%的情况。4.结论通过本次对移动 NDMC 系统 NDMCDB03 和 NDMCDB04 数据库 VCS 集群的健康检查，确认目前这个系统各功能模块均运行正常，系统性能处于良好状态。NDMCDB03: # df -hFilesystemSize Used