系统健康检查服务方案

1、设备健康检查计划XX集团股份有限公司2009 年前言31. 服务概况 31.1客户名称31.2服务时间31.3服务设备31.4服务内容32. 服务前期准备工作 42.1XXX巡检服务的前期准备工作： 42.2客户方的前期准备工作： 42.3双方待讨论和协商的问题： 43. 服务具体计划 54. 应急计划 55. 备件计划 66. 文档信息 6附录7SUN系统巡检报告及相关命令说明 7ORACL数据库巡检报告及相关命令说明 7系统配置信息7ORACLE数据库系统维护检查报告 12.、八、-刖言感谢尊敬的广东XXX用户选择了 XXX的服务，XXX公司秉承用户至上宗旨，坚持 以技术为先导，严格按照项

2、目流程和规范管理服务项目，竭诚为用户提供一流优质的服 务。本文档的主要内容是对客户信息系统进行系统健康检查（简称：巡检）的计划安 排。包括服务概况、服务前期准备工作、服务具体计划、应急计划等等。1. 服务概况 1.1客户名称广东XXX1.2服务时间 待定 1.3服务设备见设备清单1.4服务内容系统健康检测维护服务的目的在于了解被巡检系统截至到目前系统的性能状态和 存在的隐患和运行风险；检查系统的运行状况、系统配置和连接方式、系统设置的情况、系统使用环境的 及系统的日志文件，进行系统的自检和检测，分析已经发现的和潜在的问题，建议必 要的措施，提高系统的可用性和可靠性。内容包括如下：? 检查设备使

3、用环境是否符合要求和发生显著变更，包括湿度、电压、湿度、摆设 位置等? 检查电源，信号线的连接是否牢固；检查、清洁、调节系统硬件，并为需要的设 备更换元件；检查系统的硬件和系统环境配置及网络环境配置；针对客户系统现 状，提出建议和意见。? 查阅有关系统信息，检查有无出错信息，如发现出错信息，设法了解问题原因， 并后续给出问题的可能原因和解决建议。? 进行系统分析和检测，及时掌握系统的运行和安全状况，发现系统潜在问题，排 除故障隐患和安全 漏洞。? 在完成系统健康检测后，XXX服务工程师将会同XXX技术专家团队一起分析系统状况，并内向客户提交巡检分析报告和有关改进措施建议。2. 服务前期准备工作

4、 2.1XXX巡检服务的前期准备工作:1 负责提交巡检方案，获得客户认可2 负责准备巡检报告模板2份，巡检报告模板请见附录。（注：一机一份，巡检完毕后，现场提交用户）3 提供服务的工程师在约定时间准时到达现场2.2客户方的前期准备工作:1 .负责环境、场地、电源、网线、终端设备等准备工作。2 负责提供系统主机Root登陆口令（清单）。3负责提供系统设备IP地址（清单）。4 负责下电设备的加电准备工作5 .负责确定下电设备加电后的连网情况2.3双方待讨论和协商的问题: 1. Root 口令以何种方式提供？一般可米取两种方式，一是每台设备由客户来输入Root 口令，另外一种方式是由客户事先临时修改

5、Root 口令，提供给服务工程师，巡检完毕后再由客户改回。2 下电设备加电后，是否仍然具备连网条件？如果下电设备加电后不连接网络，则需要采取串口直接连接主机的方式来进行巡 检，可能会影响巡检整体速度。3 确定巡检主机顺序？系统健康检测不会影响在线设备的运行。建议巡检顺序为，首先用一台终端依次检测所有连网设备，包括加电后能连网的设 备，其次检测所有加电后无法连网的设备。3. 服务具体计划任务名称XXX责任人客户方 配合人 员计划持续 时间步骤1.现场环 境勘察 以及用 户交流1服务工程师了解现场机房 环境状况服务工程师约40分钟2服务工程师在开始实施巡 检时，向客户了解自前一 次维护服务以来所发

6、现的 异常和问题，并采取必要 的措施服务工程师3在对系统米取任何行动之 前，确保已经采取必要的 数据信息保护措施，如系 统的备份或数据转存等；服务工程师步骤2 .巡检服 务4服务工程师收集与所服务 的系统有关的系统变更、 微码发布、软件升级、软 件PATCH发布和系统问题 的信息和资料服务工程师约一到二 个工作日5依次按照巡检内容对系统 设备进行逐项巡检，并填 写巡检报告服务工程师6巡检过程中如果发现任何 系统问题，双方将协调处 理服务销售7巡检过程中如果发现任何 突发事件，请参考本文档5。服务销售步骤3.服务收 尾工作8提交现场巡检报告，客户 签字服务工程师大约1个 小时9请客户填写服务满意

7、度评 价表10双方交流服务工程师11五个工作日内提交巡检分 析报告服务工程师-4. 应急计划本次巡检服务中的设备为在线系统，理论上讲，巡检只是对系统状态进行查看， 本身不会对系统产生影响，只是在极少数情况下，系统本身已经有故障隐患，因为巡 检触发，可能会影响系统的运行，必须通过事先充分准备 ，识别可能的风险，并进行规 避和控制。通过以下方法来尽可能减少风险：? 服务工程师在开始实施巡检时，应首先向客户了解自前一次维护服务以来所发现 的异常和问题，并采取必要的措施? 在对系统采取任何行动之前，应确保已经采取必要的数据信息保护措施，如系统 的备份或数据转存等；? 服务工程师在巡检过程中记录操作步骤

8、，一旦发生突发问题，也有据可查，方便 问题的定位。? 服务工程师在巡检过程中如果发现设备有重大问题，必须尽快进行处理的事件， 由现场巡检工程师向本次用户通报，由用户同 XXX!务销售进行协商进行处理5 备件计划针对本次健康检查服务，我方主要提供对 SUN系统以及ORACLE据库的检查服务为主, 如果在检查过程中，发现有备件坏，我们会第一时间跟用户通报，并从 XXX广州备件 库调相应备件进行更换；如果备件更换处于合同覆盖范围，我们将不收取备件费用，如果合同未覆盖，我们将 收取备件物料成本费；为此次检查服务准备的备件清单包含但不限于：型号描述数量Sun V480 整机带cpu,内存,硬盘1X680

9、5A73.4GB,10000 RPM硬盘4ST3310带控制器，无硬盘1XTA-SC1NC-73G10K73GB,3310阵列硬盘4XTA-SC1NC-146G10K73GB,3310阵列硬盘46.文档信息本文档由XXX负责起草附录SUN系统巡检报告及相关命令说明ORACL数据库巡检报告及相关命令说明系统配置信息SUN系统巡检报告日期：年 月 日报告编号:客户名称检查地点主机型号IP地址主机SNHost ID配置部件型号/数量部件型号/数量CPU主板内存CPU/内存板硬盘I/O板显卡存储阵列电源磁带驱动器SCSI型号外扩网卡型号其它卡型号系统盘Raid情况管理软件名称版本RAID类型硬件检查项

10、目结果不正常请注明原因检查项目结果不正常请注明原因显示器L正常!、止常光驱正常，、止常键盘L正常!、止常软驱正常，、止常鼠标L正常!、止常线缆正常，、止常磁带机板卡L正常!、止常正常，、止常系统检查项目内容结果不正常请注明原因系统指示灯状态Front Panel LEDSL正常 不止常Power Supply LEDSL正常 不止常Disk LEDSL正常 不止常System Controller Board LEDS(CPU/Memory、I/O etc.)L正常 不止常系统 messages信息cd /var/admgrep WARN messages*grep error message

11、s*grep panic messages*/var/adm/messagesL正常 不止常/var/adm/messages.OL正常 不止常/var/adm/messages.1L正常 不止常/var/adm/messages.2L正常 不止常/var/adm/messages.3L正常 不止常硬件运行状态/usr/platform/sun4u/sbin/prtdiag -vL正常 不止常文件系统利用率df -kdf -oi/利用率%L正常 不止常/usr利用率%L正常 不止常/var利用率%L正常 不止常其它分区L正常 不止常Ionde利用率（是否有空闲）L正常 不止常Swap分区swa

12、p -susedk availablekL正常 不止常CPU负载sar 1 10% idleL正常 不止常内存剩余量vmstat 1KBytesL正常 不止常I/O资源iostat - EnL正常 不止常网络接口流量netstat - 1L正常!、止常网口以及IP状态ifconfig -aL正常!、止常网络传输率ping网关（1分钟）averagemsL止常!、止常NTP状态ntpq -pL止常!、止常远程登录设置/etc/inetd.confftp开启 关闭telnet开启 关闭进程总数ps - ef|wc-l个进程核心Patch版本uname -a冗 余 软 件Disk Suite 状态（

13、没有的不填）metastat输出结果是否正常L正常，、止常metadbMetadb建立在有个备份Volume Manager状态（没有的不填）vxdisk list输出结果是否正常L正常，、止常vxdg list有磁盘组Vxprint -ht输出结果是否正常L正常，、止常高 可 用 性 软 件SunCluster 状态版本scstat输出结果是否正常L正常，、止常备注存储ST3310阵列外观及指示灯是否正常止常，、止常show-config输出结果是否正常止常，、止常固件版本SUN主机巡检相关命令及说明检查项目使用的命令及相关目录内容及其说明外观检查无检查机器的指示灯情况、看有无故 障指示主机

14、的总体情况/usr/platform/su n4u/sb in/prtdiag-v通过该命令，可以查看到 CPU的数 量、主频、CACHED小，内存、板 卡、风扇转速、环境温度等情况查看文件系统挂接情况df -k可以查看到文件系统的挂接、使用 量等情况，如果某个文件系统使用 大于85%则要提请注意，大于 90% 则要对其进行清理，删除废文件， 如果根文件系统使用量达到100%会造成系统崩溃检查系统日志文件grep panic /var/adm/messages*grep error /var/adm/messages*grep WARN/var/adm/messages*检查系统的日志文件，看

15、有无panic、error、WARf等和错误有关 的关键字，其中，panic关键字一 般出现在操作系统因软件或硬件故障崩溃的时候，error则是系统因软件或硬件产生了错误，WARI则相对关注级别较低，属于警告，这2种情况，都要根据系统的日志提示， 进一步检查系统情况检查CPU使用情况sar 1 10检查CPU的IDEL值，越大越好，这 里给出的命令是指间隔 1秒，检查 10次交换分区使用情况swap -s查看交换区（即虚拟内存）的使用 情况内存使用情况vmstat 1检查内存的使用情况，尤其检查其 中的剩余内存量，如内存剩余过少， 则要检查进程及应用的情况，如无 异常，则意味着系统需要更多的物

16、 理内存硬盘数量及容量format通过该命令，可以查看到硬盘的容 量大小、数量等情况，硬盘及其他存储设备的情况iostat -E这个命令可以看到硬盘的运行情况， 包括：厂商、序列号，有无运行错 误等网络情况n etstat -i 1查看网络的包吞吐情况以及冲突、 包错误率等情况网络的IP设置ifconfig-a查看系统中的IP地址设置查看操作系统的核心版本uname -a该命令除了能查看到操作系统的核 心版本外，还可以查看到主机的硬 件型号主机的厂商ID 号hostid可以查看到厂商为主机设置的唯一ID统计系统当前进程数量ps -ef |wc -l可以查看到系统当前进程数量远程登录设置grep

17、 ftp /etc/inetd.conf grep tel net/etc/i netd.c onf可以查看系统的远程登录是否打开网络流通情况Pingping网络中的另一设备，通常是缺 省网关，以检查网络的流通延时情 况检查SUN CLUSTER管理的双机系统状 态scstat该命令可以显示 SUN CLUSTERS机系统的和配置、状态有关的信息通过Web方式管理SUNCLUSTEF双 机系统通过浏览其，输入主机的 IP地址， 端口号为3000，可以通过Web的方 式管理SUNCLUSTER双机系统存储及冗余软件相关检查及其命令检查项目使用的命令及相关目录内容及其说明外观检查无检查机器的指示灯

18、情况、看有无故障指示ST3X10阵列检查无通过串行口连接到阵列的串口，利用其设置 界菜单检查，具体的参数为：波特率38400,数据位8,停止位1，奇偶校验无， 流控无ST3X10阵列检查（通过sccli工具检查）show-c onfig连接了 ST3X10阵列的主机，如果安装了 sccli工具，通过输入 sccli命令，选择了 控制器后，在其界面下输入的命令用 Varitas Volume Manager管理的硬盘检查其管理下硬盘的状态vxdisk list检查Varitas Volume Manager管理下硬盘的状态用 Varitas Volume Manager管理的硬盘检查其管理下磁盘

19、组的状 态vxpri nt -ht检查Varitas Volume Manager管理下磁盘组的状态，包括其划分的子磁盘的、所做 的卷等的状态用SDS管理软件管理的 磁盘及其虚拟设备状态metastat对于用 Solstice DiskSuite （ SDS 新的版 本改为 Solaris Volume Manager，简称 SVM管理的磁盘，在操作系统下，输入该 命令，检查其管理的磁盘以及虚拟磁盘（md的状态用SDS管理软件管理的 磁盘，检查起状态数据 库的状态metadb对于用 Solstice DiskSuite （ SDS 新的版 本改为 Solaris Volume Manager，

20、简称SVM管理的磁盘，在操作系统下，输入该 命令，检查其管理数据库（用户保存SDS的设置等）的状态ORACLE数据库系统维护检查报告扌报告编号：用户基本信息用户名称：联系人：电话/传真：地址：应用系统名称：巡检时间：主机厂商/型号：操作系统/版本：CPC数/硬件内存：数据库服务器运行方式：Oracle产品/版本：系统运行状况检测序号检测内容检测指令检测结果建议1检查alert日志，是否有ora错误提示Alert文件2数据库名SQLshow db n ameparameter3实例名SQLshow in sta nce n ameparameter4数据库版本SQLselect*v$versi

21、on;from5是否归档模式SQLarchiveloglist6安装组件SQLselect*v$optio n;from7初始化参数SQLshow parameters8SGA区SQLshow sga9用户检查SQLselect user name,acco un t_status, default_tablespace,tempo rary_tablespace,created from dba_users10用户权限检查SQLselect*fromdba_role_privs;11是否存在失效对 象SQLselectowner，object_ name,object_type fromdb

22、a_objectswherestatus=INVALID12检查控制文件SQLselect*fromv$con trolfile13检查联机日志SQLselect*fromv$logfile;14检查数据文件SQLselect*fromv$datafile;15查看现有回滚段及其状态SQLSELECTSEGMENT_NAME,OWNER,TABLE SPACE_NAME,SEGMENT_ID,FI LE_ID,STATUSFROMDBA ROLLBACK SEGS;16是否有异常等待 事例SQLselecteven t,sum(decode(wait_Ti me,0,0,1)Prev,sum(

23、decode(wait_T ime,0,1,0)Curr,co un t(*)“ Tot ”fromv$sessi on _Waitgroup by event order by 4;17检测连接数情况SQLSELECTstatus,co un t(*)co un tFROM v$sessionGROUP BYstatus;selectsid,serial#,user name,pro gram,machi ne,statusfromv$sessi on;18检查表空间使用 情况19备份策略的讨论与实施20listener可用性检查Isnrctlstatusliste ner.log21CRS

24、进程检查ps-df |grep d.bin结论:1、alert 文件:有无错误?2、表空间使用情况：setlinesize 300SELECT upper(f.tablespace_name)tablespace_name,d.Tot_grootte_Mb tablespace(M),d.Tot_grootte_Mb - f.total_bytes used(M),round(d.Tot_grootte_Mb - f.total_bytes) / d.Tot_grootte_Mb * 100,2) use%,f.total_bytes free_space(M),round(f.total_b

25、ytes /d.Tot_grootte_Mb * 100,2) free%FROM(SELECT tablespace_name,round(SUM(bytes”(1024*1024),2) total_bytes, round(MAX(bytes)/(1024*1024),2) max_bytesFROM sys.dba_free_spaceGROUP BY tablespace_namef,(SELECT dd.tablespace_nameround(SUM(dd.bytes)/(1024*1024),2) Tot_grootte_MbFROM sys.dba_data_filesddG

26、ROUP BY dd.tablespace_name)dWHERE d.tablespace_name= f.tablespace_nameORDER BY 4DESC3、Shared Pool Size 命中率：select round(sum(gets)-sum(reloads)/sum(gets)*100,1) libiary cache hit ratio %from v$librarycache where namespacein (SQL AREA,TABLE/PROCEDURE,BODY,TRIGGER);4、数据字典命中率：select round(1 -sum(getmiss

27、es)/sum(gets)*100,1) data dictionary hit ratio %from v$rowcache;5、锁竞争：select substr(,1,25) Name,l.gets, l.misses,100*(l.misses/l.gets) % Ratio (STAY UNDER 1%)from v$latch l, v$latchname lnwhere in (cache buffers lru chain)and ln.latch# = l.latch#;6、排序命中率：select a.value Sort(Disk), b.v

28、alue Sort(Memory),round(100*(a.value/decode(a.value+b.value), 0,1,(a.value+b.value),2) % Ratio (STAY UNDER 5%)from v$sysstat a, v$sysstat bwhere = sorts (disk)and = sorts (memory);7、数据缓冲区命中率：select round(1 -(phy.value/(cur.value+con.value)*100,1)|% ratiofrom v$sysstat phy,v$sysstat cur

29、,v$sysstat conwhere phy .n ame=physical reads a nd cur. name=db block gets a nd con.n ame=c on siste nt gets;8、v$sessi on _wait：select sid,seq#,eve nt,WAIT_TIME,SECONDS_IN_WAITfrom v$session_wait where eve nt n ot like SQL%and eve nt not like rdbms%;9、回滚段的争用情况：select name, waits, gets, waits/gets Ra

30、tiofrom v$rollstat a, v$rollname bwhere a.usn = b.usn;10、无效对象情况：col OBJECT_NAME for a36SELECT object_name, object_type,status FROM dba_objects WHERE status like INV ALID;检查项 目使用的命令及相关目录内容及其说明alert文件alert XXX在sqlplus命令行状态下，检查日志文 件，其中XXX是只alert文件名数据库 名SQLshow parameterdb name显示数据库名实例名SQLshow parameter

31、 in sta nce n ame显示数据库实例名版本SQLselect* from v$version;显示数据库版本归档设置SQLarchive log list显示归档设置，状况安装组 件SQLselect* from v$option;显示已安装的组件初始化参数SQLshow parameters显示初始化参数SGASQLshow sga显示SGA勺设置，状态用户SQLselect username,acc oun t_status,default_tselect* from dba role privs;检查用户的权限设置失效对象SQLselectow ner, object_ na

32、me,object_typfrom dba objectswhere status=检查是否有失效对象客户签名：工程师签名： 日期：INALID控制文 件SQLselect* from v$controlfile检查控制文件连机日 志SQLselect* from v$logfile;检查数据库的连接日志数据文 件SQLselect* from v$datafile;检查数据文件回滚段SQL SELECTSEGMENT_NAME,OWNER,TA BLESPACE_NAME,SEGMENT_I D,FILE_ID,STATUS FROM DBA ROLLBACK SEGS;查看现有回滚段及其状态Sessi onselectSESSIONS_CURRENT, SESSIONS_HIGHWATER from v$lice nse;系统Session使用状态字符集selectusere nv(la nguagefrom dual;字符集共享池 命中率selectr oun d(sum(gets) sum(reloads)/sum(gets)*100,1) libiary cachehit ratio % from v$librarycache