系统运维操作手册

1、xxxx 系统系统 运维操作手册运维操作手册 xxxx 公司 二零零九年十月 版本控制版本控制 版本号版本号日期日期参与人员参与人员更新说明更新说明 1.02011-06-06创建 分发控制分发控制 编号编号读者读者文档权限文档权限与文档的主要关系与文档的主要关系 1创建、修改、读取负责编制、修改、审核 2批准负责本文档的批准程序 3标准化审核作为本项目的标准化负责人，负 责对本文档进行标准化审核 4读取 5读取 1概述概述.5 2 2主机系统主机系统.6 2.1检查文件系统利用率.6 2.2查看系统硬件软件告警日志.6 2.3检查僵死或运行时间过长的进程.7 2.4检查系统 CPU 利用率.

2、8 2.5检查系统内存利用率.8 2.6检查系统 IO 利用率.9 2.7检查系统交换量.10 2.8检查系统高可用性（HA）的使用状态.10 2.9清理过时的系统临时文件.11 2.10检查磁带库和磁带使用情况.11 2.11修改用户口令.12 2.12清洗磁带机.12 2.13检索操作系统日志.13 3系统启动与关闭系统启动与关闭.14 3.1系统的运行架构.14 3.2系统的启动.15 3.3系统的关闭.18 4系统部署系统部署.24 4.1生成部署包.24 4.2程序部署.28 5重要的系统参数配置重要的系统参数配置.41 5.1CONFIG.PROPERTIES.41 5.2SPRI

3、NG-MISTASK.XML.41 6日志查看日志查看.43 6.1WAS 日志.43 6.2DB2 日志.43 7查系统是否正确运行查系统是否正确运行.45 8系统管理员维护人员信息日志系统管理员维护人员信息日志.47 9查看表空间及附件硬盘的使用情况查看表空间及附件硬盘的使用情况.48 9.1DB2 表空间查看 .48 9.2115 服务器附件文件占用情况.48 10服务停启顺序服务停启顺序.50 1 概述概述 本手册给出了湖南省移动公司的报账平台系统及报账平台外围 系统的运维操作细则。手册从主机系统、应用系统以及数据库系统 三个方面对任务项进行组织，对应章节包括第 Error! Refe

4、rence source not found.章报账平台主机系统，第 Error! Reference source not found.章报账平台应用软件系统以及第 Error! Reference source not found.章报账平台数据库系统。每个任务项中可能涉及的表格将 在第 5 章表单模板中统一给出。 2 2 主机系统主机系统 2.1 检查文件系统利用率检查文件系统利用率 编 号名 称检查文件系统利用率 描 述此任务检查文件系统利用率不低于 85%或有大于 0.5G 以上的空闲空间 操作角色 主机系统 管理员 所属管控类别巡检执行频度每日 操作说明 1. 系统的正常运行应保证

5、有足够的磁盘空间，文件系统被写满会导致 系统服务的中断，可以使用 df k 进行检查是否有文件系统利用率 高于 85%并且可用空间小于 500M，对于保存数据库数据文件所在的 磁盘空间和保存归档日志的应有更高的空闲空间。 2. 但也不可以盲目的扩展文件系统，因为目前 31 省所使用的文件系统 均不可以缩小，如果要回收空间只能删除重建 表单填写参见表单模板中的巡检单表格 2.2 查看系统硬件软件告警日志查看系统硬件软件告警日志 编 号名 称查看系统硬件软件告警日志 描 述此任务查看系统硬件软件告警日志 操作角色 主机系统 管理员 所属管控类别巡检执行频度每日 操作说明 以 root 运行 tai

6、l /var/adm/messages 查看，如果系统写满了一个 message 文件会自动备份为 message.0， message.1 等。 表单填写参见表单模板中的巡检单表格 2.3 检查僵死或运行时间过长的进程检查僵死或运行时间过长的进程 编 号名 称检查僵死或运行时间过长的进程 描 述此任务查看检查僵死或运行时间过长的进程 操作角色 主机系统 管理员 所属管控类别巡检执行频度每日 操作说明 1. 使用 ps ef|grep applprd 和 ps ef |grep oraprd 进行检查 （运行时间超过 12 小时的绝大部分是需要注意的进程） 。 2. 而程序名为 defunct

7、 的均为孤儿或僵死进程。 3. 由于，夜晚为非工作时间，因此运行超过 12 个小时的应用服务例如， form 服务的客户端进程（AIX 平台为 f60runm，SUN 平台为 f60webmx） ，很可能是运行出错的进程，应可以 kill 掉，对于数据 库进程一般不采用在 UNIX 命令中 kill 的方法而是登陆到数据库使用 alter system kill session ,的方法中止 该数据库进程。 表单填写参见表单模板中的巡检单表格 2.4 检查系统检查系统 CPU 利用率利用率 编 号名 称检查系统 CPU 利用率 描 述此任务检查系统 CPU 利用率 操作角色 主机系统 管理员

8、所属管控类别巡检执行频度每日 操作说明 1.prstat a solaris 2. psrinfo -v (CPU 状态) 表单填写参见表单模板中的巡检单表格 2.5 检查系统内存利用率检查系统内存利用率 编 号名 称检查系统内存利用率 描 述此任务检查内存利用率 操作角色 主机系统 管理员 所属管控类别巡检执行频度每日 操作说明 1.solaris vmstat 查看 free 值 2.prtdiag -v 表单填写参见表单模板中的巡检单表格 2.6 检查系统检查系统 IO 利用率利用率 编 号名 称检查系统 IO 利用率 描 述此任务检查 IO 利用率 操作角色 主机系统 管理员 所属管控

9、类别巡检执行频度每日 操作说明 1.solaris iostat 表单填写参见表单模板中的巡检单表格 2.7 检查系统交换量检查系统交换量 编 号名 称检查系统交换量 描 述此任务检查系统交换量 操作角色 主机系统 管理员 所属管控类别巡检执行频度每日 操作说明 1. 手动运行的方法如下： topas 2.swap l & swap s solaris 表单填写参见表单模板中的巡检单表格 2.8 检查系统高可用性（检查系统高可用性（HA）的使用状态）的使用状态 编 号名 称检查系统高可用性（HA）的使用状态 描 述此任务检查系统高可用性（HA）的使用状态 操作角色 主机系统 管理员 所属管控类

10、别巡检执行频度每日 操作说明 1.webview 状 态 # /etc/opt/FJSVwvbs/etc/bin/wvstat 2.CF 和心跳状 态 # cftool - 和 cftool -r 3.SF 状态 # sdtool -s 4.CIP 状态# ciptool -a 和 # ciptool -n 5.CRM 状态 # /etc/opt/FJSVcluster/bin/clgettree 6.RMS 状态 # hvdisp -a 1. 表单填写参见表单模板中的巡检单表格 2.9 清理过时的系统临时文件清理过时的系统临时文件 编 号名 称清理过时的系统临时文件 描 述此任务清理过时的系

11、统临时文件 操作角色 主机系统 管理员 所属管控类别巡检执行频度每周 操作说明 1. f60*dump*。 2. $ORACLE_HOME/reports60/server/cache/*（最好关闭服务 清理） 。 3. $APPLTMP/*（只有关闭服务后可以进行） 。 表单填写参见表单模板中的巡检单表格 2.10 检查磁带库和磁带使用情况检查磁带库和磁带使用情况 编 号名 称检查磁带库和磁带使用情况 描 述此任务检查磁带库和磁带使用情况 操作角色 主机系统 管理员 所属管控类别巡检执行频度每周 操作说明 1. 检查是否有足够的空间保存备份。 2. 磁带库运行中是否有错误出现。 表单填写参见

12、表单模板中的巡检单表格 2.11 修改用户口令修改用户口令 编 号名 称修改 UNIX 用户口令 描 述此项目修改用户口令 操作角色 主机系统 管理员 所属管控类别 用户帐号及 密码管理 执行频度每月 操作说明 1. 修改 UNIX 密码步骤如下： letterboxusername1: passwd Enter login password: 您的旧密码 New password: 您的新密码 Re-enter new password: 您的新密码 passwd (SYSTEM): passwd successfully changed for username letterboxuser

13、name2: 2.密码修改之后，必须及时通知系统管理员。 修改过 UNIX 口令之后，需要通知需要知道口令的人员。 表单填写参见表单模板中的用户帐号管理情况登记表 2.12 清洗磁带机清洗磁带机 编 号名 称清洗磁带机 描 述此任务将清洗磁带机清洗干净 操作角色 主机系统 管理员 所属管控类别备份管理执行频度每月 操作说明 用清洗带清洗磁带机。 表单填写参见表单模板中的巡检单表格 2.13 检索操作系统日志检索操作系统日志 编 号名 称检索 AIX 操作系统日志 描 述此任务检索操作系统日志 操作角色 主机系统 管理员 所属管控类别日志管理执行频度每周 操作说明 1查看用户登陆日志： 在命令行

14、输入命令：last 2查看用户失败登陆日志： 在命令行输入命令，进入日志所在目录：cd /etc/security 查看日志内容： vi failedlogin 3查看 su 命令执行日志内容： 在命令行输入命令，进入日志所在目录：cd /var/adm 查看日志内容：vi sulog 4查看 Auditor 文件操作日志 首先需要在系统中开启 audit 功能，会在系统中自动生成 /etc/security/audit/bin*文件。此处的 bin*指所有以 bin 开头的文件 进入日志所在目录：cd /etc/security/audit/ 查看日志： vi bin* 表单填写参见表单模板

15、中日志检索申请表及日志检索记录表 根据情况可能需要备份介质访问登记表 3 系统启动与关闭系统启动与关闭 3.1 系统的运行架构系统的运行架构 3.2 系统的启动系统的启动 编 号名 称检查系统启动 描 述此任务查看系统登录以了解应用系统此时此刻的运行状况 操作角色 应用系统 管理员 所属管控类别巡检执行频度系统更改 操作说明 第一步： 第二步：挂接 NFS： 第三步：启动其他软件， 表单填写参见表单模板中的巡检单表格 输入用户名 root 和 root 的密码，点击 OK。 选择 Global Cluster Service； 选择 Cluster Admin，选择其中的任意一个节点，如 db

16、svr； 选择 rms 标签页，在 Tools 菜单中选择启动； 启动后的状态如下图所示： 3.3 系统的关闭系统的关闭 编 号名 称系统关闭 描 述此任务查看系统关闭 操作角色 应用系统 管理员 所属管控类别巡检执行频度系统更改 操作说明 表单填写参见表单模板中的巡检单表格 输入用户名 root 和 root 的密码，点击 OK。 选择 Global Cluster Service； 第一步： 第二步：关闭其他软件 这样，应用就关闭完成了。 选择 Cluster Admin，选择其中的任意一个节点，如 dbsvr； 选择 rms 标签页，在 Tools 菜单中选择关闭； 根据需要，选择 st

17、op all Apps。 关闭完成后，如下图所示： 4 系统部署系统部署 4.1 生成部署包生成部署包 首先，需要更新 SVN 上的版本，在版本管理机器 F:ProductSpecialSrc1128src 下， 选定下面的文件，按右键，选择 update： F:ProductSpecialSrc1128WebRoot 下，选定下面的文件，按右键，选择 update： 进入 Eclipse： 查看项目属性，确实为 F:ProductSpecialSrc1128 的项目： 在项目上按右键，选择 Refresh。 在 Project 菜单，选择 Clean： 待 Clean 完成后，在 File

18、菜单选择 Export， 选择 War file： 导出到一个文件夹： 这样，部署包就生成了。 4.2 程序部署程序部署 登录到：15:9060/ibm/console/ 输入用户名，可输入 root： 选择应用程序企业应用程序，选定 eFinance.war，点击停止： 待停止完成后，选择 eFinance.war，点击删除： 点击确定： 点击保存： 点击安装： 点击浏览，选定部署包： 输入上下文根： eFinance ，点击下一步： 点击下一步： 选定所有集群和服务器，选定 ent_bpms，点击应用； 选定 ent_bpms，点击下一步： 点击完成：

19、点击保存： 部署包已经部署完成，如下图所示： 下一步的任务是启动应用程序。 点击集群： 选择 Cluster，点击停止： 待选择 Cluster，点击启动： 启动完成后，如下图所示： 启动完成后，进行验证：16/eFinance 5 重要的系统参数配置重要的系统参数配置 6 日志查看日志查看 6.1 WAS 日志日志 编 号名 称检查 WAS 日志 描 述此任务查看WAS 日志状况 操作角色 应用系统 管理员 所属管控类别巡检执行频度每日 操作说明 1Wassvr 日志存放于： /opt/IBM/WebSphere/AppServer/profiles/Ap

20、pSrv01/logs/wassvr 2dbsvr 日志存放于 /opt/IBM/WebSphere/AppServer/profiles/AppSrv01/logs/dbsvr 表单填写参见表单模板中的巡检单表格 6.2 DB2 日志日志 编 号名 称检查 DB2 日志 描 述此任务查看DB2 日志状况 操作角色 应用系统 管理员 所属管控类别巡检执行频度每日 操作说明 1Db2 日志存放与 dbsvr 服务器的： /ef/appinst/sqllib/db2dump 表单填写参见表单模板中的巡检单表格 7 查系统是否正确运行查系统是否正确运行 编 号名 称检查系统登录 描 述此任务查看系统登录以了解应用系统此时此刻的运行状况 操作角色 应用系统 管理员 所属管控类别巡检执行频度每日 操作说明 1. 如果页面能正常显示，说明 115 服务器或 11