系统健康检查服务方案

1、设备健康检查计划XX集团股份有限公司2009年前言31 .服务概况31.1 客户名称31.2 服务时间31.3 服务设备31.4 服务内容32 .服务前期准备工作42.1 XXX巡检服务的前期准备工作：42.2 客户方的前期准备工作：42.3 双方待讨论和协'商的问题：43 .服务具体计划44 .应急计划55 .备件计划66 .文档信息6附录7SUN系统巡检报告及相关命令说明7ORACL激据库巡检报告及相关命令说明7系统配置信息7ORACLE数据库系统维护检查报告12前言感谢尊敬的广东XXX用户选择了XXX勺服务，XXX公司秉承用户至上宗旨，坚持以技术为先导，严格按照项目流程和规范管理

2、服务项目，竭诚为用户提供一流优质的服务。本文档的主要内容是对客户信息系统进行系统健康检查（简称：巡检）的计划安排包括服务概况、服务前期准备工作、服务具体计划、应急计划等等。1 .服务概况1.1 客户名称广东XXX1.2 服务时间待定1.3 服务设备见设备清单1.4 服务内容系统健康检测维护服务的目的在于了解被巡检系统截至到目前系统的性能状态和存在的隐患和运行风险；检查系统的运行状况、系统配置和连接方式、系统设置的情况、系统使用环境的及系统的日志文件，进行系统的自检和检测，分析已经发现的和潜在的问题，建议必要的措施，提高系统的可用性和可靠性。内容包括如下：检查设备使用环境是否符合要求和发生显著变

3、更，包括湿度、电压、湿度、摆设位置等检查电源，信号线的连接是否牢固；检查、清洁、调节系统硬件，并为需要的设备更换元件；检查系统的硬件和系统环境配置及网络环境配置；针对客户系统现状，提出建议和意见。查阅有关系统信息，检查有无出错信息，如发现出错信息，设法了解问题原因，并后续给出问题的可能原因和解决建议。进行系统分析和检测，及时掌握系统的运行和安全状况，发现系统潜在问题，排除故障隐患和安全漏洞。在完成系统健康检测后,XXX®务工程师将会同XXXft术专家团队一起分析系统状况，并内向客户提交巡检分析报告和有关改进措施建议。2 .服务前期准备工作2.1 XXX巡检服务的前期准备工作:1 .负

4、责提交巡检方案，获得客户认可2 .负责准备巡检报告模板2份，巡检报告模板请见附录。（注：一机一份，巡检完毕后,现场提交用户）3 .提供服务的工程师在约定时间准时到达现场4 .2客户方的前期准备工作：1 .负责环境、场地、电源、网线、终端设备等准备工作。2 .负责提供系统主机Root登陆口令（清单）。3 .负责提供系统设备IP地址（清单）。4 .负责下电设备的加电准备工作5 .负责确定下电设备加电后的连网情况6 .3双方待讨论和协商的问题：1 .Root口令以何种方式提供？一般可采取两种方式，一是每台设备由客户来输入Root口令，另外一种方式是由客户事先临时修改Root口令，提供给服务工程师，巡

5、检完毕后再由客户改回。2 .下电设备加电后，是否仍然具备连网条件？如果下电设备加电后不连接网络，则需要采取串口直接连接主机的方式来进行巡检，可能会影响巡检整体速度。3 .确定巡检主机顺序？系统健康检测不会影响在线设备的运行。建议巡检顺序为，首先用一台终端依次检测所有连网设备，包括加电后能连网的设备，其次检测所有加电后无法连网的设备。3.服务具体计划任务名称XXX责任人客户方计划持续配合人员时间步骤1.现场环1服务工程师了解现场机房环境状况服务工程师约40分钟境勘察以及用户交流2服务工程师在开始实施巡检时，向客户了解自前一次维护服务以来所发现的异常和问题，并采取必要的措施服务工程师3在对系统米取

6、任何行动之前，确保已经采取必要的数据信息保护措施，如系统的备份或数据转存等；服务工程师步骤2.巡检服务4服务工程师收集与所服务的系统有关的系统变更、微码发布、软件升级、软件PATCK布和系统问题的信息和资料服务工程师约一到二个工作日5依次按照巡检内容对系统设备进行逐项巡检，并填写巡检报告服务工程师6巡检过程中如果发现任何系统问题，双方将协调处理服务销售7巡检过程中如果发现任何突发事件，请参考本文档5。服务销售步骤3.服务收8提交现场巡检报告，客户签字服务工程师大约1个小时尾工作9请客户填写服务满意度评价表10双方交流服务工程师11五个工作日内提交巡检分析报告服务工程师-4 .应急计划本次巡检服

7、务中的设备为在线系统，理论上讲，巡检只是对系统状态进行查看，本身不会对系统产生影响，只是在极少数情况下，系统本身已经有故障隐患，因为巡检触发，可能会影响系统的运行，必须通过事先充分准备，识别可能的风险，并进行规避和控制。通过以下方法来尽可能减少风险：服务工程师在开始实施巡检时，应首先向客户了解自前一次维护服务以来所发现的异常和问题，并采取必要的措施在对系统采取任何行动之前，应确保已经采取必要的数据信息保护措施，如系统的备份或数据转存等；服务工程师在巡检过程中记录操作步骤，一旦发生突发问题，也有据可查，方便问题的定位。服务工程师在巡检过程中如果发现设备有重大问题，必须尽快进行处理的事件，由现场巡

8、检工程师向本次用户通报，由用户同XX刈艮务销售进行协商进行处理。5 .备件计划针对本次健康检查服务，我方主要提供对SUNS统以及ORACL敢据库的检查服务为主，如果在检查过程中，发现有备件坏，我们会第一时间跟用户通报，并从XXX广州备件库调相应备件进行更换；如果备件更换处于合同覆盖范围，我们将不收取备件费用，如果合同未覆盖，我们将收取备件物料成本费；为此次检查服务准备的备件清单包含但不限于:型号描述数量SunV480整机带cpu,内存,硬盘1X6805A73.4GB,10000RPM硬盘4ST3310带控制器，无硬盘1XTA-SC1NC-73G10K73GB,3310阵列硬盘4XTA-SC1N

9、C-146G10K73GB,3310阵列硬盘46 .文档信息本文档由XXX负责起草附录SUN系统巡检报告及相关命令说明ORACL敢据库巡检报告及相关命令说明系统配置信息SUN系统巡检报告日期：年月日报告编号:客户名称检查地点主机型号IP地址主机SNHostID部件型号/数量部件型号/数量配CPU主板内存CPU/内存板置硬盘I/O板显卡存储阵列电源磁带驱动器SCSI型号外扩网卡型号其它卡型号系统盘Raid情况管理软件名称版本RAID类型硬件检查项目结果不正常请注明原因检查项目结果不正常请注明原因显示器Lth常L止常光驱Ulh常L止常键盘软驱Lth常L止常Ulh常L止常鼠标Lth常L止常线缆Ulh

10、常L止常磁带机板卡Lth常L止常Ulh常L止常系统检查项目内容结果不正常请注明原因系统指示灯状态FrontPanelLEDSLth常L止常PowerSupplyLEDSLth常L止常DiskLEDSLth常L止常SystemControllerBoardLEDS(CPU/Memory、I/Oetc.)Lth常L止常系统messages信息cd/var/admgrepWARNmessages*greperrormessages*greppanicmessages*/var/adm/messagesLth常L止常/var/adm/messages.0Lth常L止常/var/adm/messages

11、.1Lth常L止常/var/adm/messages.2Lth常L止常/var/adm/messages.3Lth常L止常硬件运行状态/usr/platform/sun4u/sbin/prtdiag-vLth常L止常文件系统利用率df«dfpi/利用率%Lth常L止常/usr利用率%Lth常L止常/var利用率%Lth常L止常其它分区Lth常L止常Ionde利用率（是否有空闲）Lth常L止常Swap分区swap-susedkavailablekLth常L止常CPU负载sar110%idleLth常L止常内存剩余量vmstat1KBytesLth常L止常I/O资源iostatEnLth

12、常L止常网络接口流量netstat-i1Lth常L止常网口以及IP状态ifconfig-aLth常L止常网络传输率ping网关（1分钟）averagemsLth常L止常NTP状态ntpq-pLth常L止常远程登录设置/etc/inetd.confftp匚开启口关闭telnet匚开启口关闭进程总数ps-ef|wc-l个进程核心Patch版本uname-aDiskSuite状态metastat输出结果是否正常Lth常止常几（没有的不填）metadbMetadb建立在有个备份余软VolumeManagervxdisklist输出结果是否正常Lth常止常件状态（没有的不vxdglist有磁盘组填）Vx

13、print-ht输出结果是否正常Lth常止常高版本可scstat输出结果是否正常Lth常止常用SunCluster状态性软备注件存外观及指示灯是否正常Lth常止常储ST3310阵列show-config输出结果是否正常Lth常止常固件版本SU性机巡检相关命令及说明检查项目使用的命令及相关目录内容及其说明外观检查无检查机器的指示灯情况、看有无故障指示主机的总体情况/usr/platform/sun4u/sbin/prtdiag-v通过该命令，可以查看到CPU的数量、主频、CACHED、，内存、板卡、风扇转速、环境温度等情况查看文件系统挂接情况df-k可以查看到文件系统的挂接、使用量等情况，如果某

14、个文件系统使用大于85%则要提请注意，大于90%W要对其进行清理，删除废文件，如果根文件系统使用量达到100%,会造成系统崩溃检查系统日志文件greppanic/var/adm/messages*greperror/var/adm/messages*grepWARN/var/adm/messages*检查系统的日志文件，看有无panic、error、WARN和错误有关的关键字，其中，panic关键字一般出现在操作系统因软件或硬件故障崩溃的时候，error则是系统因软件或硬件产生了错误，WARNW相对关注级别较低，属于警告，这2种情况，都要根据系统的日志提示，进一步检查系统情况检查CPU使用情况

15、sar110检查CPU的IDEL值，越大越好，这里给出的命令是指间隔1秒，检查10次交换分区使用情况swap-s查看交换区（即虚拟内存）的使用情况内存使用情况vmstat1检查内存的使用情况，尤其检查其中的剩余内存量，如内存剩余过少，则要检查进程及应用的情况，如无异常，则意味着系统需要更多的物理内存硬盘数量及容量format通过该命令，可以查看到硬盘的容量大小、数量等情况，硬盘及其他存储设备的情况iostat-E这个命令可以看到硬盘的运行情况，包括：厂商、序列号，有无运行错误等网络情况netstat-i1查看网络的包吞吐情况以及冲突、包错误率等情况网络的IP设置ifconfig-a查看系统中的

16、IP地址设置查看操作系统的核心版本uname-a该命令除了能查看到操作系统的核心版本外，还可以查看到主机的硬件型号主机的厂商ID号hostid可以查看到厂商为主机设置的唯一ID统计系统当前进程数量ps-ef|wc-l可以查看到系统当前进程数量远程登录设置grepftp/etc/inetd.confgreptelnet/etc/inetd.conf可以查看系统的远程登录是否打开网络流通情况pingping网络中的另一设备，通常是缺省网关，以检查网络的流通延时情况检查SUNCLUSTER!理的双机系统状态scstat该命令可以显示SUNCLUSTEFRZ机系统的和配置、状态有关的信息通过Web方式

17、管理SUNCLUSTE瞰机系统通过浏览其，输入主机的IP地址，端口号为3000,可以通过Web的方式管理SUNCLUSTERS机系统存储及冗余软件相关检查及其命令检查项目使用的命令及相关目录内容及其说明外观检查无检查机器的指示灯情况、看有无故障指示ST3x10阵列检查无通过串行口连接到阵列的串口，利用其设置界菜单检查，具体的参数为：波特率38400,数据位8,停止位1,奇偶校验无，流控无ST3x10阵列检查（通过sccli工具检查）show-config连接了ST3x10阵列的主机，如果安装了sccli工具，通过输入sccli命令，选择了控制器后，在其界面卜输入的命令用VaritasVolum

18、eManager管理的硬盘检查其管理下硬盘的状态vxdisklist检查VaritasVolumeManager管理下硬盘的状态用VaritasVolumeManager管理的硬盘检查其管理下磁盘组的状态vxprint-ht检查VaritasVolumeManager管理下磁盘组的状态，包括其划分的子磁盘的、所做的卷等的状态用SDS管理软件管理的磁盘及其虚拟设备状态metastat对于用SolsticeDiskSuite（SDS新的版本改为SolarisVolumeManager,简称SVM管理的磁盘，在操作系统下，输入该命令，检查其管理的磁盘以及虚拟磁盘（mcl）的状态用SDS管理软件管理的

19、磁盘，检查起状态数据库的状态metadb对于用SolsticeDiskSuite（SDS新的版本改为SolarisVolumeManager,简称SVM管理的磁盘，在操作系统下，输入该命令，检查其管理数据库（用户保存SDS的设置等）的状态ORACLE数据库系统维护检查报告报告编号：用户基本信息用户名称：联系人：电话/传真：地址：应用系统名称：巡检时间：主机厂商/型号：操作系统/版本：CPLB/硬件内存：数据库服务器运行方式：Oracle产品/版本：系统运行状况检测序号检测内容检测指令检测结果建议1检查alert日志，是否有ora错误提示Alert文件2数据库名SQL>showparame

20、terdb_name3实例名SQL>showparameterinstance_name4数据库版本SQL>select*fromv$version;5是否归档模式SQL>archiveloglist6安装组件SQL>select*fromv$option;7初始化参数SQL>showparameters8SGA区SQL>showsga9用户检查SQL>selectusername,account_status,default_tablespace,temporary_tablespace,createdfromdba_users10用户权限检查SQL

21、>select*fromdba_role_privs;11是否存在失效对象SQL>selectowner,object_name,object_typefromdba_objectswherestatus=INVALID'12检查控制文件SQL>select*fromv$controlfile13检查联机日志SQL>select*fromv$logfile;14检查数据文件SQL>select*fromv$datafile;15查看现有回滚段及其状态SQL>SELECTSEGMENT_NAME,OWNER,TABLESPACE_NAME,SEGMEN

22、T_ID,FILE_ID,STATUSFROMDBA_ROLLBACK_SEGS;16是否有异常等待事例SQL>selectevent,sum(decode(wait_Time,0,0,1)"Prev",sum(decode(wait_Time,0,1,0)"Curr",count(*)Tot”fromv$session_Waitgroupbyeventorderby4;17检测连接数情况SQL>SELECTstatus,count(*)"count"FROMv$sessionGROUPBYstatus;selectsid

23、,serial#,username,program,machine,statusfromv$session;18检查表空间使用情况19备份策略的讨论与实施20listener可用性检查lsnrctlstatuslistener.log21CRS进程检查ps-df|grepd.bin结论:1、alert文件：有无错误？2、表空间使用情况：setlinesize300SELECTupper(f.tablespace_name)"tablespace_name",d.Tot_grootte_Mb"tablespace(M)",d.Tot_grootte_Mb-

24、f.total_bytes"used(M)",round(d.Tot_grootte_Mb-f.total_bytes)/d.Tot_grootte_Mb*100,2)"use%",f.total_bytes"free_space(M)",round(f.total_bytes/d.Tot_grootte_Mb*100,2)"free%"FROM(SELECTtablespace_name,round(SUM(bytes)/(1024*1024),2)total_bytes,round(MAX(bytes)/(10

25、24*1024),2)max_bytesFROMsys.dba_free_spaceGROUPBYtablespace_name)f,(SELECTdd.tablespace_name,round(SUM(dd.bytes)/(1024*1024),2)Tot_grootte_MbFROMsys.dba_data_filesddGROUPBYdd.tablespace_name)dWHEREd.tablespace_name=f.tablespace_nameORDERBY4DESC/3、SharedPoolSize命中率：selectround(sum(gets)-sum(reloads)/

26、sum(gets)*100,1)"libiarycachehitratio%fromv$librarycachewherenamespacein('SQLAREA','TABLE/PROCEDURE','BODY','TRIGGER');4、数据字典命中率：selectround(1-sum(getmisses)/sum(gets)*100,1)"datadictionaryhitratio%"fromv$rowcache;5、锁竞争：selectsubstr(,1,25)Name,l.

27、gets,l.misses,100*(l.misses/l.gets)"%Ratio(STAYUNDER1%)"fromv$latchl,v$latchnameInwhereIin('cachebuffersIruchain')andln.latch#=l.latch#;6、排序命中率：selecta.value"Sort(Disk)",b.value"Sort(Memory)",round(100*(a.value/decode(a.value+b.value),0,1,(a.value+b.value)

28、,2)"%Ratio(STAYUNDER5%)"fromv$sysstata,v$='sorts(disk)'='sorts(memory)'7、数据缓冲区命中率：selectround(1-(phy.value/(cur.value+con.value)*100,1)|'%'ratiofromv$sysstatphy,v$sysstatcur,v$='physicalreads'=

29、9;dbblockgets'='consistentgets'8、v$session_wait:selectsid,seq#,event,WAIT_TIME,SECONDS_IN_WAITfromv$session_waitwhereeventnotlike'SQL%andeventnotlike'rdbms%'9、回滚段的争用情况：selectname,waits,gets,waits/gets"Ratio"fromv$rollstata,v$rollnamebwherea.usn=b.usn;10、无

30、效对象情况：colOBJECT_NAMEfora36SELECTobject_name,object_type,statusFROMdba_objectsWHEREstatuslike'INVALID'客户签名:工程师签名:日期：检查项目使用的命令及相关目录内容及具说明alert文件alertXXX在sqlplus命令行状态卜，检查日志文件，其中XXX是只alert文件名数据库名SQL>showparameterdb_name显示数据库名实例名SQL>showparameterinstance_name显示数据库实例名版本SQL>select*fromv$ve

31、rsion;显示数据库版本归档设置SQL>archiveloglist显示归档设置，状况安装组件SQL>select*fromv$option;显示已安装的组件初始化参数SQL>showparameters显示初始化参数SGASQL>showsga显示SGA勺设置，状态用户SQL>selectusername,account_status,default_tablespace,temporary_tablespace,createdfromdbausers用户检查权限SQL>select*fromdba_role_privs;检查用户的权限设置失效对象SQL

32、>selectowner,object_name,object_typefromdba_objectswherestatus='INVALID'检查是否启失效对象控制文件SQL>select*fromv$controlfile检查控制文件连机日志SQL>select*fromv$logfile;检查数据库的连接日志数据文件SQL>select*fromv$datafile;检查数据文件回滚段SQL>SELECTSEGMENT_NAME,OWNER,TABLESPACE_NAME,SEGMENT_ID,FILE_ID,STATUSFROMDBAROLLBACKSEGS;查看现有回滚段及其状态SessionselectSESSIONS_CURRENT,SESSIONS_HIGHWATERfromv$license;系统Session使用状态字符集selectuserenv('language')fromdual;字符集共享池命中率selectround(sum(gets)-sum(reloads)/sum(gets)*100,1)"libiarycachehitratio%"fromv$librarycachewherenamespacein('SQLA