服务器系统维护操作手册-

1、贝蒂斯特级初梓橄榄油青岛金欧利营销有限公司文件名称:编号:版本号: 编制人: 审核人: 批准人: 生效日期:季忠凯操作手册服务器系统维护操作手册G-WI/630-06-0201/04.2修改页：如下所示修改记录修改序号修改前内容修改后内容修改人第一次流程图目的通过规范服务器系统维护操作，降低服务器系统维护过程中可能带来的业务风险。适用范围本文件适用于青岛金欧利营销有限公司信息部。术语3.1服务器系统：公司各服务器及与服务器相连的外设和存储设备。3.2主服务器系统：指小型机服务器及与其相连的外设和存储设备。3.3次服务器系统：指除小型机外其它的服务器及与其相连的外设和存储设备。职责4.1信息部负

2、责服务器系统的日常维护和管理。管理内容：5.1主服务器系统维护手册5.1.1CRM服务器维护手册文件系统检查# df -kFilesystem1024-blocksFree %UsedIused %Iused Mounted on/dev/hd410485760514309651%94951% /dev/hd210485760801494824%498853% /usr/dev/hd9var1048576099754005%97871% /var/dev/hd310485760877323217%9731% /tmp/dev/hd110485760104781481%221% /home/pr

3、oc-/proc/dev/hd10opt524288049296366%102441% /opt/dev/fslv011569718272699891% /bi/dev/fslv00941621248 8583136409%575961% /crm检查内容：红色字体Used部分，如果有超过85%,说明文件系统需要扩容或者检查为什么超出。查看系统故障记录收集# errptIDENTIFIER TIMESTAMP T C RESOURCE_NAME DESCRIPTIONB62673420709235512 P H hdisk10DISK OPERATION ERRORB

4、62673420708235512 P H hdisk10DISK OPERATION ERRORB62673420707235512 P H hdisk10DISK OPERATION ERRORB62673420706235512 P H hdisk10DISK OPERATION ERRORB62673420705235512 P H hdisk10DISK OPERATION ERROR检查内容：如果有错误内容将会显示出来，例如B6267342就是-个错误（此错误可以不考虑，其一直存在）。检查有无发给root的mail# mailNo mail for root检查内容：查看发给Roo

5、t的mail中有无错误信息。检查mail中的error和warning关键字。系统性能检查.1通过topas查看系统总体性能概况：Topaa Monitor Fri Jan 6 16：For host:FB_prod50：06 2006 Interval: 2KernelUserHaltIdle0 9 7 4 + + + +3 3 0 24 5I#I #I#I #etwork.en2en33S6t933t00+3I-Pack S46t6 2316 l+5-Pack.B46t632 tGl+5hdisk.1 hdisk.0 hdiak21 hdisk.20 hdisk72 hdiskll hdi

6、sk/3 hdiak.64 hdisk.70 hdisk.66 hdiskBO hdisk.75 hdiak.4 hdisk.2iSIEjnai 10t0 10t0 0t0 0.0 0t0 0t0 0t0 0t0 0.0 0t0 0t0 oto oto 0.0 otoName察看cpu使用的wai.2 使用 vmstFGOwebmx FGOwebmx FGOwebmx 7NDLTB计来检查GOwebmxEVENTS/QUEUES Cswitch Syscall ReadsCPU利用情泌葺履Execs Runqueue 例券邻扫PAGING FaultsSteals Pgspln PgspOut

7、KB-In 193 + 4 l+7 0+2KB-0ut 193 + 4 31+3 0+236S11S9S514331100741022BFILE/TTY Readch Writech Raw in Ttyout I gets Name! Dirbik2674+OK 2762t6K3B6997MEMORY Real,MB X Comp X Noncomp X Client31B07 3B+4 19tl 19+5166+BClientsServerV3ClientV3PAGING SPACE332B00t699.3TPS KB-Read RErit 261KBPS 16618 166.8PIE 5

8、32930 700978 4923S2 250340 40% .U J1 及 CPI 1004Crn a ? -1 nOwner applprod applprod applprod 使田/用raprod applprodTOP进程，七B_prod#B_prod#vmstat 1 5iystem Configur-ation： 1 cpu=lb mem =31808MBmemory0 30279550 302S2650 302S4490 3026S370 302669S rod#lfre re35601193559S0S355962435612343561372=1o o o o oro o

9、o o o【50000 oyo o o o o cn o o o o O1sy cs us sy id wa14 5700 603 29 0 71 0 39 3405 500 35 0 65 0 93 2017 1069 27 0 73 0 39 9119 2429 33 1 66 0 200 17725 26S6 34 1 64 0其中列为正在运行的，b列为等待运行的，并查看page中有无较大的pi和po。.3使用iosta t来检查10平衡使用情况：SubsystemGroupPIDStatusclstrmgrEScluster115192activeclinfoEScluster1600

10、48active*是否超过70%Fftprod #i ostat 1 5oHstem cont iguration: lcpu=lb drivesdy paths=! vdisksC1hriak/OAJ16384MB1h3H4ME：5 !：hdisk.yndisklhdiskUhdiskU,I urn erootwgtoutbU+53328OME：iLisk4.ihdisk4hcisk-iH-irisk2!lhciskOhrisk?iLiskllhri：sk73iLiskti4hdisk/UhdisktibhdiskHUhdisk/5hdisk4hdiskUidisklihdiskb.5hLi

11、skbyhdisk.iUhcisk/4hdisk.ihdiskSh.-bRR mThriskihdiskU运行：# Issrc -g clusterHB数值的io出现，如有需hdlsklb,-B_prod#lsps 一&Phi-isi cal v ol urn epagingUOrootvgrootw g检查内容：Status状态为activeo TSM备份检查.1CRM系统备份日志检查运行：# cd /crm/scripts/log# more bkdb_sprod.log检查内容：如果bkdb_sprod.log中最后显示为complete则备份成功，否则备份失败。.2 BI系统备份日志检

12、查运行：#cd /bi/scripts/log#more bkdb_bprod.log检查内容：如果bkdb_sprod.log中最后显示为complete则备份成功，否则备份失败。5.2存储检查手册5.2.1 IBM DS5020 存储检查需要安装 IBM System Storage manager 工具登录manager工具后，输入密码：passw0rd检查status状态：如果有异常，其图标将变为非绿色。Di-ives： 1Total capacity： 3,90；. 110 GBHosts St MappingsIn_use: CSt：mdby： 1I I Avail al 0.00

13、0 ( . Confi gi 3,901.Storage Subsystem View M：ppings Array Logical Drive Controller Drive 人如皿口溯 HelpJll圆回阻回国 OptimaIn-use： UStiiiidliy： 15.3带库Ts3200检查手册 登录 HYPERLINK http:/172.16.045/login.ssi http:/172.16.045/login.ssiAirays fit Logical DrivesQj Ai-rays：1Q Logical Drives: 10RAID 5 Ait ays: 1 Logica

14、l Drives: 1UInfoiniati on CenterOnline HelpS t or a?：e C ori: epts Tut or i ：alFl：aiuiins Your Confi 切irati onConfi iirirL Tour Storage SubsystemEsseriti：=il Terme to Kn口胃选择用户及输入密码：用户名为admin，密码为：secureIBM System Storage TS32QC Tape LibraryLogin检查system status状态：Drivel和Driver2都应该为ready状态5.4光纤交换机检查手册5

15、.4.1光纤交换机A检查手册 登录： HYPERLINK 8 8 输入用户名和密码用户名：admin密码：passw0rd检查内容：Status / Temp/ Power/ Fan指示灯是否为绿色。5.4.2光纤交换机B检查手册Manage reports Monitor moisTasks -Manage同 Zone Admin国 Switch Admin 凰 Port Admin 脂 Admin DomainMonitor登录 HYPERLINK 9 9其他检查步骤与的检查手册相同5.5虚拟化检查手册虚拟化设备为2台服务器，IP地址分别为1和25.5.1登录7服务器：开始-运行mstsc

16、 /console输入用户名和密码。5.5.2 运行“VMware vSphere Client”。5.5.3在登录界面输入需要登录设备的IP及用户名和密码5.5.4虚拟化检查内容：虚拟化操作系统运行情况虚拟化CPU、内存、存储使用情况文件任）编辑也）视国地）洁单如 系统管理（A）插件 帮助但） 畲主页A曲清单A淳清单口 172.163.31BB5 biapp crmapp crmappZ crmapp3 IdapprodIdapsit toolsVersionM wangzhan yewu-tesl：esH. VMviare ESX, 4.0.0r 164009制造商；IBM型号：Syste

17、m ：:3850 跖-7145M8.CPU内模：16 个 CPU x 1.861 GHz处理器类型：Intel(R) Xeon(R) CPU E7520 1.87GHz许可证：v5phere 4 Enterprise Plus4个物理EPU已荻许可(处理器插口：4每个插口的肉核数：4谡辑处理器:32起线程；活动网卡数目;3状况:已连接虚拟机和模板：11.Motion 已启用：不可用VMware EVC 模式：不可用容诺已启用：活动任务:不可用主机配置文件：不可用配置文件合规情况:不可用入门院4虚拟机 资源分配性能配置 用户和组事件权限此主机目前由vCenter Server 首理口单击此处将,

18、/Sphere Client 重亲M圭寸奔囹vCenter Server.主林管理命令gr新建虚拟机野新建资源池）】进入范护模式 o重新引导 &美机虚拟化事件重点检查是否有警告提示5.6数据库检查手册5.6.1登录CRM数据库步骤:# su - crm$ sqlplus /nologSQL*Plus: Release .0 Production on Tue Jul 10 18:03:20 2012Copyright (c) 1982, 2009, Oracle. All rights reserved.SQL conn /as sysdbaConnected.5.6.2登录BI数据库步骤：#

19、 su - bi$ sqlplus /nologSQL*Plus: Release .0 Production on Tue Jul 10 18:03:20 2012Copyright (c) 1982, 2009, Oracle. All rights reserved.SQL conn /as sysdbaConnected.5.6.3在登录数据库后执行以下2-7操作手动检查alert_log中有没有报错检查 CRM： #cat /crm/app/oracle/diag/sprod/sprod/trace/alert* Igrep -i ora- 检查 BI： #cat /bi/app/o

20、racle/diag/bprod/bprod/trace/alert* Igrep -i ora-表空间检查期望值：使用超过95%，报警SELECT a.tablespace_name,round(a.bytes - b.bytes) * 100) / a.maxbytes, 2) % USED, round(a.maxbytes - a.bytes + b.bytes) * 100) / a.maxbytes, 2) % FREE, round(a.maxbytes / 1024 / 1024 / 1024, 2) TOTAL(G),round(a.bytes - b.bytes) / 10

21、24 / 1024 / 1024, 2) USED(G), round(a.maxbytes - a.bytes + b.bytes) / 1024 / 1024 / 1024, 2) FREE(G), round(a.maxbytes / 1024 / 1024, 2) TOTAL(M),round(a.bytes - b.bytes) / 1024 / 1024, 2) USED(M), round(a.maxbytes - a.bytes + b.bytes) / 1024 / 1024, 2) FREE(M), a.maxbytes / 1024 TOTAL(K),(a.bytes -

22、 b.bytes) / 1024 USED(K),(a.maxbytes - a.bytes + b.bytes) / 1024 FREE(K), a.maxbytes TOTAL(B), a.bytes - b.bytes USED(B),(a.maxbytes - a.bytes + b.bytes) FREE(B)FROM (SELECT ddf.tablespace_name,SUM(decode(ddf.autoextensible, NO, ddf.bytes, ddf.maxbytes) maxbytes, SUM(ddf.bytes) bytesFROM dba_data_fi

23、les ddfGROUP BY ddf.tablespace_name) a,(SELECT dfs.tablespace_name, SUM(dfs.bytes) bytes FROM dba_free_space dfs GROUP BY dfs.tablespace_name) bWHERE a.tablespace_name = b.tablespace_nameORDER BY round(a.bytes - b.bytes) * 100) / a.maxbytes, 2) DESC;死锁检查期望值：不存在数据SELECT vs.sid, vs.serial#, vs.audsid,

24、 alter system kill session | | vs.sid | , | vs.serial# | | ;, vs.username db_user, vs.status, vs.osuser client_os_user, cess, vs.machine client_machine, vs.terminal, gram, vs.module, vs.action, vs.logon_time,vp.spid,vp.username dbserver_os_user,gramFROM v$session vs, v$process vpWHERE vs.paddr = vp.

25、addr-AND vp.SPID = 1451322AND vs.sid IN (SELECT vl.sid FROM v$lock vl WHERE vl.BLOCK = 1);-AND vs.PROCESS = 2961502无效对象检查期望值：不存在数据select *from dba_objectswhere status = INVALIDand owner not in (SYS, SYSTEM);数据文件属性检查期望值：不存在数据SELECT ddf.file_name, ddf.tablespace_name, ddf.bytes / 1024 / 1024 M, ddf.statusFROM dba_data_files ddfWHERE ddf.status AVAILABLE;数据文件状态检查期望值：不存在数据SELECT ddf.NAME, ddf.checkpoint