mVision系统日常维护指导10

1、mvision系统日常维护指导 mvision系统日常维护指导项目与技术支持部内部使用资料作者参与人审核人签发人签发日期mvision系统日常维护指导 文档修订记录 序号修订人修订内容简述修订日期修订后版本号批准人1建立a0mvision系统日常维护指导 出版说明出版说明内容简介内容简介ut斯达康mvision系统维护手册对mvision系统维护人员的职责分工进行了描述，对维护人员的维护及操作流程提出了科学而合理的建议；对维护人员如何进行系统巡检及巡检的项目和周期作了详尽描述；对日常维护中的关键项目和周期进行了详细阐述；维护手册中还汇集了丰富的故障解决案例。为方便读者阅读，更好的服务于客户，维

2、护手册共包含以下几个部分：mvision系统维护指导：系统维护指导：mvision系统巡检指导mvision系统日常维护指导mvision系统故障分析和解决指导第三方设备维护指导：第三方设备维护指导：sun服务器设备日常维护指导 ip网络设备日常维护指导oracle数据库日常维护指导mvision系统日常维护指导 本文档为其中的本文档为其中的mvision系统日常维护指导系统日常维护指导本文将根据现场情况不断更新，更新后的文档将及时发布于客户支持网站（http:/），如果你有更新硬拷贝的需求，请通过当地的客户经理向我们申请。本文档共分2章节，分别为：第一章：第一章：mvision系统维护建议系

3、统维护建议第二章：第二章：mvision系统日常维护指导系统日常维护指导本文档的读者范围本文档的读者范围ut斯达康mvision系统的维护工程师及其相关人员，要求读者熟悉mvision的系统组成、系统功能及各个子系统间的相互关联，熟悉switch、dslam等宽带产品，以及unix、linux操作系统和mysql、oracle数据库，能进行基于unix/linux的基本操作，具备一定的维护经验。维护过程中如遇到困难或有什么建议，非常欢迎你拨打客户服务中心热线电话寻求技术支持。我公司随机发给客户的各种手册资料上也会有关操作维护和技术问题的详细说明，请参考使用。mvision系统日常维护指导 本文

4、的相关约定本文内容涉及到许多操作命令，为了便于读者阅读，我们对本文进行了如下约定： 输入图标表示以下的内容为输入命令，输入命令使用宋体黑斜体9号字符，并缩进两个字符。 输出图标表示以下的内容为输出显示，输出显示使用宋体黑斜体9号字符，并缩进两个字符。 以分析图标的文字内容是对上面输出显示的解释，在分析的文字内容中如要引用输出显示的内容，则使用双引号。当一行代码太长以至于超过本文的一行时，它在一个合适的地方断开并在下一行继续，续行符“”出现在上一行的行尾。（在输入含有这个续行符的一行时，应该把它作为没有断开的一个长行）。注意部分的的内容，以注意图标开始，具体内容加黑框表示。注意给出了重要的信息，

5、以帮助读者理解。 警告部分的的内容，以警告图标开始，具体内容加黑框表示。警告提供了有关有害操作或危险错误的信息。对警告信息要特别注意。 mvision系统日常维护指导 项目与技术支持部 ii 目目 录录第第 一一 章章mvision系统维护建议系统维护建议.41.1mvision系统维护人员分工与职责.41.1.1维护人员组织结构简图.41.1.2mvision系统维护人员的分工与职责.41.2mvision系统日常维护投诉处理流程.61.2.1mvision系统日常维护投诉处理流程说明 .71.2.2说明 .81.3mvision系统日常维护参考文档.8第第 二二 章章mvision系统日常

6、维护指导系统日常维护指导.92.1mvision硬件日常维护报告表.92.1.1服务器硬件状态检查表.92.1.2oss/nms硬件状态检查表.92.1.3月维护小结.102.1.4季度维护报告.112.1.5年度维护报告表 .122.1.6硬件更换记录表 .132.2mvision服务器日常维护内容.142.2.1服务器进程的查看.142.2.2服务器和进程的启动停止.162.2.3服务器日志检查 .172.3oss服务器日常维护内容.182.3.1oss服务器进程的查看.182.3.2oss服务器的启动和停止.192.3.3oss服务器的日志检查.202.4nms服务器日常维护内容.212

7、.4.1nms服务器进程查看 .21mvision系统日常维护指导 项目与技术支持部 iii 2.4.2nms服务器进程的启动停止.212.4.3nms服务器日志检查 .21 mvision系统日常维护指导 客户成功，我们成功4第第 一一 章章 mvisionmvision系统维护建议系统维护建议mvision系统维护建议将对整个mvision系统维护人员的分工和职责提出合理建议的基础上，并重点介绍mvision系统server部分和oss部分的故障处理流程和在日常维护中可以参考的技术资料。1.1mvisionmvision系统维护人员分工与职责系统维护人员分工与职责1.1.1维护人员组织结构

8、简图维护人员组织结构简图图 1 mvision系统维护组织结构图1.1.2mvisionmvision系统维护人员的分工与职责系统维护人员的分工与职责系统工程师系统工程师职责：职责：系统工程师是整个网络日常维护小组的总负责，负责指导和协调整个系统维护人员的工作流程和接口等，协调维护小组与外部其它配合人员之间的工作关系。m mv vi is si io on n系系统统工工程程师师投投诉诉受受理理工工程程师师m me ed di ia a服服务务器器维维护护工工程程师师o os ss s/ /n nm ms s维维护护工工程程师师宽宽带带产产品品维维护护工工程程师师宽宽带带机机房房

9、维维护护工工程程师师系系统统工工程程师师宽宽带带系系统统工工程程师师m mc c维维护护工工程程师师n nm ms s维维护护工工程程师师mvision系统日常维护指导 客户成功，我们成功5技术要求：技术要求： ip 网络技术基础/unix、linux 操作系统知识/mysql、oracle技术基础/；熟悉整个mvision系统的原理，软硬件的安装调试，以及系统维护；熟悉宽带产品，如switch、route、dslam等产品的安装调试。mvisionmvision系统工程师系统工程师包括media服务器维护工程师、oss维护工程师、nms维护工程师和mc维护工程师。mediame

10、dia服务器维护工程师服务器维护工程师o职责：职责：media服务器维护工程师负责mvision服务器（包括me/md/cec/ce/as/app/dnld/epg/mdr/mlr/cmm）的日常维护和排障、系统安装升级等工作，以及mysql数据库的维护。o技术要求：技术要求：linux 操作系统 /ip 网络技术基础/mysql 技术基础知识，熟悉整个mvision系统的原理,以及mvision系统各个版本软件的安装调试。ossoss维护工程师维护工程师o职责：职责：oss维护工程师负责oss系统的日常维护，包括计费接口的维护，业务接口的维护、计费系统相关的其他业务的维护。o技术要求：技术要

11、求：具有unix操作系统/oracle 技术基础，熟练使用sql，熟悉mvision产品的oss部分功能和计费业务流程。 nmsnms网管维护工程师网管维护工程师o职责：职责：nmsnms网管维护工程师负责网管系统的维护和网络日常告警的监控。o技术要求：技术要求：具有oracle技术基础/ip 网络技术基础/unix 操作系统知识，熟悉网管上的各项操作和告警含义。mcmc维护工程师维护工程师o职责：职责：mcmc维护工程师负责mc机顶盒的日常维护和升级。o技术要求：技术要求：具有ip 网络技术基础，熟悉mvision系统mc部分的使用和配置，mc软件的升级。宽带系统宽带系统工程师

12、工程师包括宽带产品维护工程师、宽带机房维护工程师。宽带产品维护工程师宽带产品维护工程师mvision系统日常维护指导 客户成功，我们成功6o职责职责: : 宽带产品维护工程师负责mvision系统相关的switch/router/dslam等宽带产品的日常故障处理和安装、调测，以及网络设备的升级等。o技术要求技术要求: : 具有ip 技术基础，能对大部分厂家的宽带产品进行安装调试。 宽带机房维护工程师宽带机房维护工程师o职责：职责：宽带机房维护工程师负责宽带机房中机柜，网线，电源等部分的安装，排障和维护。o技术要求：技术要求：具有电信网的用户端电缆的配线知识。投诉受理工程师投诉受

13、理工程师职责：职责：投诉受理工程师负责受理和收集用户投诉信息。技术要求：技术要求：了解mvision系统的基本知识，掌握一定的处理客户抱怨的技巧。1.2mvisionmvision系统日常维护投诉处理流程系统日常维护投诉处理流程通过mvision系统日常维护能及时发现和解决系统或者宽带网络发生的问题。当有个别用户投诉时的服务流程应该成为一个闭环系统。 mvision系统日常维护指导 客户成功，我们成功7 用户申告是否为mvision系统问题？mvision系统工程师处理宽带系统工程师处理回访用户不满意yn图 2 故障处理流程1.2.1mvisionmvision系统日常维护投诉处理流程说明系统

14、日常维护投诉处理流程说明 以下内容是根据服务的理念，结合以上流程的相关说明。具体流程处理的平台可以因客户不同而异。用户申告 用户的申告源于用户对服务的不满意，涉及的范围很广。投诉受理工程师负责将问题分类，将应该由mvision系统工程师受理的问题分离出来。这部份职能一般是由客户的服务中心受理。问题分类和处理问题分类和处理确定问题属于mvision系统的后，投诉受理工程师将该问题直接递交给系统工程师进行判断：是mvision系统的问题，还是宽带网络的问题。mvision系统日常维护指导 客户成功，我们成功mvisionmvision系统的问题系统的问题如果是mvis

15、ion系统的问题，由mvision系统工程师按照内部的人员分工，将不同部分的问题分派给指定的人员进行处理。处理完毕后，直接回访客户以确认客户满意与否。如果无法处理，可要求系统工程师寻求其他的资源来协助共同解决，直至客户满意。处理完毕后，应通知投诉受理工程师。宽带系统的问题宽带系统的问题 如果是宽带系统的问题，需要进一步区分出是宽带产品的问题还是宽带机房环境有问题，并按照分工指派相应的工程师进行处理，直至客户满意。处理完毕后，应通知投诉受理工程师。客户的回访客户的回访 客户回访目的是确认问题是否解决，提升客户的满意度，使服务成为一个闭环。1.2.2说明说明 mvisi

16、on系统维护组织的人员分工和职责明确，对系统的日常正常运行具有非常重要的意义。由于各个网络运营商的组织职能和结构均有所不同，所以本建议只为客户提供运营mvision系统的一些参考，具体如何形成有效的维护流程，客户可根据自己的实际情况制定。1.3mvisionmvision系统日常维护参考文档系统日常维护参考文档mvision系统日常维护指导 客户成功，我们成功9第第 二二 章章mvisionmvision系统日常维护指导系统日常维护指导2.1mvisionmvision硬件日常维护报告表硬件日常维护报告表2.1.1服务器硬件状态检查表服务器硬件状态检查表序号维护项目指示灯名称状态相关操作检查人

17、签名1指示灯状态2pdp指示灯状态3md指示灯状态4me指示灯状态5cec指示灯状态6ce指示灯状态7ip网络端口状态8md网口状态9me网口状态10cec网口状态11ce网口状态小结注：建议对每个blade进行以上操作。系统中使用的板卡类型视具体情况而定。表 1 blade硬件状态检查表2.1.2oss/nmsoss/nms硬件状态检查表硬件状态检查表oss/nms服务器采用sun的服务器，具体硬件维护检查请参见以下文档：sun服务器设备日常维护指导 mvision系统日常维护指导 客户成功，我们成功10oracle数据库日常维护指导2.1.3月维护小结月维护小结月维护小结月维护小结维护人表

18、 2 月维护报表mvision系统日常维护指导 客户成功，我们成功112.1.4季度维护报告季度维护报告 季度维护小结季度维护小结维护人表 3 季度维护报告表media switch系统日常维护指导 项目与技术支持部 12 2.1.5年度维护报告表年度维护报告表年度维护小结年度维护小结维护人表 4 年度维护报告表media switch系统日常维护指导 项目与技术支持部 13 2.1.6硬件更换记录表硬件更换记录表更换原因原板卡名称， 编号更换后板卡名称编号更换数量更换日期更换人media switch系统日常维护指导 项目与技术支持部 14 2.2mvisionmvision服务器日常维护内

19、容服务器日常维护内容2.2.1服务器进程的查看服务器进程的查看通过通过psps axfaxf检查各个服务器各个进程运行状态检查各个服务器各个进程运行状态以下是md/as/app/dnld/cmm/mdr/mlr/ls服务器需要运行的进程：monitornms_monitor media_directorauthservdnldservappsvr epg_assistant licservcmmmlr rootmd_14_118 root# ps -axf 685 ? sl 0:01 ntpd -u ntp -g 703 ? s 0:00 crond 710 ? s 0:00 /bin/sh

20、./bin/safe_mysqld -datadir=/usr/local/mysql/data -pid-file=/usr/local/mysql/data/md_14_118.pid 773 ? s 0:50 _ /usr/local/mysql/bin/mysqld -defaults-extra-file=/usr/local/mysql/data/f -basedir=/usr/local/m 754 ? s 0:00 /usr/sbin/atd 785 ? sl 0:00 ntpd -u ntp -g 858 ? s 0:00 /usr/local/rss/bin/monitor

21、 -d /usr/local/rss/data/svr_data 865 ? s 0:00 _ /usr/local/rss/bin/monitor -d /usr/local/rss/data/svr_data 1010 ? s 0:00 | _ cmm -d 1022 ? s 0:00 | _ licserv -dmedia switch系统日常维护指导 项目与技术支持部 15 1051 ? s 0:06 | _ authserv -d 1072 ? s 0:00 | _ mdrserv -d 1132 ? s 0:00 | _ appserv -d 4657 ? s 0:00 | _ e

22、pg_assistant -d 861 ? s 0:00 /usr/local/rss/bin/monitor -d /usr/local/rss/data/md_data 866 ? s 0:00 _ /usr/local/rss/bin/monitor -d /usr/local/rss/data/md_data 868 ? s 86:04 | _ nms_monitor -d -m md -e eth0 953 ? s 274:40 | _ media_director -c eth0 -e eth0 -s -a 18 954 ? s 34:28 | | _ medi

23、a_director -c eth0 -e eth0 -s -a 18 964 ? s 0:00 | _ dnldserv -d . 5382 ? s 0:00 /usr/local/apache2/bin/httpd -k start 5383 ? s 0:00 _ /usr/local/apache2/bin/httpd -k start 5384 ? s 0:00 _ /usr/local/apache2/bin/httpd -k start 5385 ? s 0:00 _ /usr/local/apache2/bin/httpd -k start 5386 ? s

24、0:00 _ /usr/local/apache2/bin/httpd -k start 5387 ? s 0:00 _ /usr/local/apache2/bin/httpd -k start 5388 ? s 0:00 _ /usr/local/apache2/bin/httpd -k start 5389 ? s 0:00 _ /usr/local/apache2/bin/httpd -k start 5390 ? s 0:00 _ /usr/local/apache2/bin/httpd -k start 5391 ? s 0:00 _ /usr/local/apache2/bin/

25、httpd -k start 5392 ? s 0:00 _ /usr/local/apache2/bin/httpd -k start 5395 ? s 0:00 _ /usr/local/apache2/bin/httpd -k start 5576 ? s 0:00 _ /usr/local/apache2/bin/httpd -k start1、 上面的进程检查结果是在md/as/app/dnld/cmm/mdr/mlr运行在同一服务器的情况下。mlr进程可以根据系统功能需要决定是否运行。2、 此服务器上别的进程因为篇幅没有显示media switch系统日常维护指导 项目与技术支持部

26、 16 2.2.2服务器和进程的启动停止服务器和进程的启动停止服务器启动顺序：服务器启动顺序：服务器启动步骤：服务器启动步骤：启动脚本已经在系统启动文件中进行配置，执行/etc/rc.d/rc.local将自动运行本机所有服务模块：#cd /etc/rc.d/#./rc.local start 进程的启动顺序：进程的启动顺序：建议各个进程都通过monitor来启动as/app/dnld/cmm/mdr/mlr/hcm/ls的启动：./usr/local/rss/bin/monitor d /usr/local/rss/data/svr_datamd/dnld的启动：#./usr/local/r

27、ss/bin/monitor d /usr/local/rss/data/md_datame的启动：media switch系统日常维护指导 项目与技术支持部 17 #./usr/local/rss/bin/monitor d /usr/local/rss/data/me_datacec的启动：#./usr/local/rss/bin/monitor d /usr/local/rss/data/cec_datace的启动：#./usr/local/rss/bin/monitor d /usr/local/rss/data/cen_dataapache的启动：#cd /usr/local/apa

28、che/bin#./apachectl start进程的停止：进程的停止：as/app/dnld/cmm/mdr/mlr/ls的停止：#killall monitor nms_monitor authserv appserv dnldserv cmm mdrserv mlr_svr licserv epg_assistantmd的停止：#killall monitor nms_monitor media_director dnldservme的停止：#killall monitor nms_monitor media_enginecec的停止：#killall monitor nms_moni

29、tor mdr_agent ce_controllerce的停止：#killall monitor nms_monitor ce_agent encoder0apache的停止：#cd /usr/local/apache/bin#./apachectl stop2.2.3服务器日志检查服务器日志检查各个服务器应该检查一下日志：组件组件对应日志文件对应日志文件media switch系统日常维护指导 项目与技术支持部 18 epg/var/log/epg-php.log /var/log/epg_assistant.logapp/var/log/appserv.logcmm/var/log/cm

30、m.logmlr/var/log/mlr.log(s) /var/log/ ba.log(c)-in mdmdr/var/log/mdrserv.log(s) /var/log/mdr_agent.log(c)-in cecls/var/log/licserv.logms/var/log/media_director.log /var/log/dnldserv.log /var/log/media_engine.logcec/var/log/ce_controller.logce/var/log/ce_agent.log /var/log/capture0.log as/var/log/aut

31、hserv.log /var/log/dnldserv.log2.3ossoss服务器日常维护内容服务器日常维护内容2.3.1oss服务器进程的查看服务器进程的查看通过ps ef 查看进程sam&mam&sam_as_serversam&mam&sam_as_server process:process: wacos 403 1 0 jun 15 ? 0:00 ./sam_as_server #sam_as_server wacos 13543 1 0 jun 15 ? 0:00 ./sam_as # sam_as wacos 29909 1 0 jun 16 ? 0:16 ./mam2cm

32、# mamcsccsc process:process: wacos 17517 1 0 jun 16 ? 0:01 /usr/java1.2/bin/./jre/bin/./bin/sparc/native_threads/java -ms16m -mx512m com # csctsts process:process: wacos 24155 24111 0 16:46:00 pts/4 0:03 tpsc n # ts - tpsc wacos 24154 24111 0 16:45:50 pts/4 0:00 tseh # ts - tseh wacos 24160 24111 0

33、16:46:11 pts/4 0:01 tslr -m -d n # ts- tslroracleoracle process:process:oracle 374 1 0 jun 15 ? 0:00 /opt/oracle/db01/app/oracle/product/9.2.0/bin/tnslsnr listener inherit # oracle oracle 346 1 0 jun 15 ? 0:01 ora_pmon_orcl oracle 348 1 0 jun 15 ? 0:07 ora_dbw0_orcl oracle 350 1 0 jun 15 ? 0:55 ora_

34、lgwr_orcl oracle 352 1 0 jun 15 ? 0:48 ora_ckpt_orcl oracle 354 1 0 jun 15 ? 0:22 ora_smon_orcl oracle 356 1 0 jun 15 ? 0:00 ora_reco_orcl oracle 358 1 0 jun 15 ? 0:02 ora_cjq0_orcl oracle 360 1 0 jun 15 ? 9:24 ora_qmn0_orclmedia switch系统日常维护指导 项目与技术支持部 19 oracle 362 1 0 jun 15 ? 0:04 ora_s000_orcl

35、oracle 364 1 0 jun 15 ? 0:00 ora_d000_orclotherother porcessporcess wacos 2608 2593 0 jun 16 ? 0:04 /usr/java/bin/./jre/bin/./bin/sparc/native_threads/java org.apache.jserv.jser # apache&java etc wacos 2595 2591 0 jun 16 ? 0:01 /opt/wacos/tools/apache/bin/httpd # apache wacos 2592 2591 0 jun 16 ? 0:

36、00 /opt/wacos/tools/apache/bin/httpd wacos 2591 1 0 jun 16 ? 0:01 /opt/wacos/tools/apache/bin/httpd wacos 14295 2592 0 jun 19 ? 0:02 /opt/wacos/oss/bin/oss_maloader.fcg wacos 2593 2591 0 jun 16 ? 0:02 /opt/wacos/tools/apache/bin/httpd wacos 3141 2591 0 jun 16 ? 0:00 /opt/wacos/tools/apache/bin/httpd

37、 wacos 6757 2591 0 jun 16 ? 0:00 /opt/wacos/tools/apache/bin/httpd wacos 2597 2591 0 jun 16 ? 0:00 /opt/wacos/tools/apache/bin/httpd wacos 3395 2592 0 jun 16 ? 5:28 /opt/wacos/oss/bin/oss_mediamam.fcg2.3.2ossoss服务器的启动和停止服务器的启动和停止start/stop oss运行系统启动脚本，系统将自动启动/停止所有应用进程，包括系统数据库：/etc/rc2.d/s99dbora start/etc/rc2.d/s99dbora stop如果需要停止/启动某些应用模块进程，可以按照如下方式操作：startstart tstscd /opt/wacos/server/ts/binnohup tseh &nohup tpsc -n &nohup tslr -m -d -n &s