LTE troubleshooting V1.2.9

1、TDR2000产品配置手册错误！未定义样式。错误！未定义样式。 TD-LTE eNodeB & OMC EMB5116 TD-LTE Troubleshooting手册 2TD-LTEeNodeB & OMCEMB5116 TD-LTETroubleshooting手册产品类别： EMB5116 TD-LTE OMC-R TLE3000 其他：文档系统产品版本：V1.2.5资料版本：文档编号：DTM 4.600.792大唐移动通信设备有限公司为客户提供全方位的技术支持，用户可与当地的大唐移动办事处联系，也可直接与公司总部客服中心联系。大唐移动通信设备有限公司地址：北京市海淀区学

2、院路29号邮编：100083网址：客服中心电话：800-990-8800400-890-8800客户服务邮箱：support声明大唐移动通信设备有限公司版权所有，保留一切权利。本资料及其包含的所有内容为大唐移动通信设备有限公司（大唐移动）所有，受中国法律及适用之国际公约中有关著作权法律的保护。未经大唐移动书面授权，任何人不得以任何形式复制、传播、散布、改动或以其它方式使用本资料的部分或全部内容，违者将被依法追究责任。由于产品版本升级或其它原因，本手册内容会不定期进行更新。除非另有约定，本手册仅作为使用指导，本手册中的所有陈述、信息和建议不构成任何明示或暗示的担保。 为了我们能更好地为您服务，请

3、填写您对我们资料的意见，并传真至唐移动通信设备有限公司客服中心，或通过邮箱supportdatangmobile、cn反馈，我们将对好的建议给予奖励。1、 请您对以下表格中各项进行评价，并将评价结果填写在相应单元。（打“ü”）评价项目很好好一般差使用方便表达清楚内容完整内容正确结构合理图表说明装帧形式总体满意2、 您认为我们应该在以下哪些方面进行改进？（打“ü”） 改进结构编排表达应更详细 改进目录结构表达应更简洁 增加图形说明专业性不要太强 增加典型实例改进索引方法 提供更多帮助信息增加“step by step”描述请您对以上改进建议进行详细

4、说明：3、 您对本手册的哪些内容比较满意？4、 其他建议：为了我们能够及时与您联系，请填写有关您本人的以下信息：姓名：_单位：_电话：_地址：_E-Mail：_日期：_1-3前言 LTE troubleshooting手册前言内容介绍本文档主要介绍ENB和OMC网元在例行维护中常会遇到的常见问题及处理方法，文档主要分为两部分：1）基础篇，对两个网元的基本问题分类及出现不同问题时提取那些日志进行了说明，2）排障方法篇，通过对典型问题排障方法的描述，指导现场及后方维护人员处理故障。 由于产品问题的定位方法已在相应的手册中给出，本文档不再赘述。 ENB产品问题定位方法请参见：EMB产品问题定位手册V

5、3.20.00下面部分根据文档最终结构进行修订：前言：对troubleshooting手册的编写目的和主要内容进行说明。基础篇：介绍了OMC和ENB网元的常见问题分类及日志提取方式。排障方法篇：介绍了OMC和ENB网元常见问题的排障方法。附录A 缩略语：附录A列出了本文描述中所出现的所有英文缩略语，并给出其英文全称和中文解释，方便读者查阅。附录B 文档修订记录。读者对象本书适合下列人员阅读：客服维护人员LTE产品维护人员LTE系统维护人员本书约定通用格式约定格 式意 义宋体正文采用宋体表示。黑体除一级标题采用宋体加粗以外，其余各级标题均采用黑体。楷体警告、提示等内容一律用楷体，并且在内容前后增

6、加线条与正文隔离。命令行格式约定格 式意 义粗体命令行关键字（命令中保持不变、必须照输的部分）采用加粗字体表示。斜体命令行参数（命令中必须由实际值进行替代的部分）采用斜体表示。 表示用“ ”括起来的部分在命令配置时是可选的。 x | y | 、 表示从两个或多个选项中选取一个。 x | y | 、 表示从两个或多个选项中选取一个或者不选。 x | y | 、 *表示从两个或多个选项中选取多个，最少选取一个，最多选取所有选项。 x | y | 、 *表示从两个或多个选项中选取多个或者不选。!由惊叹号“!”开始的行表示为注释行。图形界面格式约定格 式意 义< >带尖括号“< &g

7、t;”表示操作员从终端输入的信息。 带方括号“ ”表示人机界面、菜单名、数据表和字段名等。/多级菜单用“/”隔开。如文件/新建/文件夹多级菜单表示文件菜单下的新建子菜单下的文件夹菜单项。键盘操作约定格 式意 义加尖括号的宋体字符表示键名或按钮名。如<Enter>、<Tab>、<Backspace>、<a>等分别表示回车、制表、退格、小写字母a。<键1 + 键2>表示在键盘上同时按下几个键。如<Ctrl+Alt+A>表示同时按下“Ctrl”、“Alt”、“A”这三个键。<键1，键2>表示先按第一键，释放，再按第二

8、键。如<Alt，F>表示先按<Alt>键，释放后，紧接着再按<F>键。鼠标操作约定格 式意 义单击快速按下并释放鼠标的一个按钮。双击连续两次快速按下并释放鼠标的一个按钮。拖动按住鼠标的一个按钮不放，移动鼠标。各类标志本书还采用各种醒目标志来表示在操作过程中应该特别注意的地方，这些标志的意义如下，正文中的各类警告、提示、说明等的内容一律采用楷体，并在内容前后加横线与正文分开如下：& 说明：说明、提示、窍门、思考：对操作内容的描述进行必要的补充和说明。 注意：小心、注意、警告、危险：提醒操作中应注意的目录前言i内容介绍i读者对象i本书约定i目录iii第1

9、章基础篇1-11.1问题分类1-11.1.1ENB问题分类及排障方法1-11.1.2OMC问题分类及排障方法1-21.2日志提取要求1-31.2.1ENB日志相关1-31.2.2OMC日志相关1-18第2章排障方法篇2-12.1ENB排障2-12.1.1小区退服问题2-12.1.2主站问题2-32.1.3传输问题2-42.1.4GPS问题2-212.1.5RRU问题2-252.1.6本地小区建立失败，IQ数据通路配置失败2-562.1.7逻辑小区无法建立，提示RRU小区建立响应失败2-562.1.8LMT远程无法登陆基站问题2-562.1.9业务问题2-592.1.10速率问题2-662.1.

10、11切换问题2-722.2OMC排障方法汇总2-822.2.1OMC同步配置网元时间失败2-822.2.2OMC应用服务器启动失败2-852.2.3OMC进程莫名退出2-862.2.4OMC软件无法安装2-872.2.5同一账户无法在多台终端登录OMT2-872.2.6OMT穿透防火墙远程连接OMC服务设置方案2-892.3干扰问题定位方法汇总2-93附录A：ATP使用手册I附录B：本地维护工具使用手册II附录C：缩略语III附录D：文档修订记录I1-27LTE troubleshooting手册 基础篇第1章 基础篇1.1 问题分类1.1.1 ENB问题分类及排障方法 BBU侧

11、问题分类1） BBU供电相关：无法上电、反复上下电等；2） BBU板卡相关：规划板卡不在位、板卡反复复位等；3） GPS相关：GPS无法锁定、GPS反复进入holdover状态等；4） 风扇及温度相关：风扇转速异常、板卡温度告警等；5） 其他：处理器不存活、任务进入异常运行状态等。 RRU侧问题分类1） RRU供电相关：无法上电、反复上下电等；2） RRU状态相关：规划的RRU不在位、RRU反复接入主站等；3） RRU通道相关：RRU驻波比告警、RRU输出功率告警、RRU收/发通道故障等；4） RRU温度相关：RRU高温告警等；5） 其他：RRU智能天线校准相关等。

12、 系统相关问题分类1） 光功率相关：光口功率过低、光纤异常、光口误码告警等；2） 传输问题：S1链路、X2链路、OM链路故障及闪断等；3） 业务速率问题；4） 双模站点TD与LTE交互的问题。 ENB常用排障方法汇总在配合提取研发所需的定位信息后，可执行的操作有：1）板卡或RRU复位；2）去激活激活小区；3）整站复位；4）更换板卡或RRU；5）远程或近端对整站及板卡升级；6）针对特定问题的初步定位和信息收集：如抓包、UDP灌包、终端信息获取等；7）辅材更换或工程整改，如更换光模块、光纤等。1.1.2 OMC问题分类及排障方法 OMC问题分类1）客户端无法登陆问题；2

13、）基站OM链路保活失败问题；3）基站配置数据无法同步问题；4）性能报表无法正常提取问题；5）命令行操作无法正常执行命令。 OMC 常用排障方法汇总客户端无法连接服务器是最为常见的故障，基本思路如下：1) 检查服务器和客户端之间是否可正常通信，可使用ping命令测试；2) 客户端与服务器之间如果存在防火墙，是否正确设置防火墙穿透（详见排障案例的防火墙穿透设置），同时检查防火墙设备是否正确的设置映射关系；3) 数据库服务、监听启动是否正常；4) OMC应用服务启动是否正常。5） 维护PC机问题。基站OM链路保活失败问题排障方法：1) 登陆nea所在服务器，对基站IP进行ping测试，

14、如果无法ping通，请对路由和传输进行检查；2) 尝试使用LMT-B登陆基站，如果无法登陆，请联系基站支持人员处理；如果可以登陆，检查基站侧nea地址和网关地址是否设置正确；尝试使用LMT-B下载日志和一致性文件是否正常，如果无法正常下载，请联系基站支持人员处理；3) 登陆nea所在服务器，用snoop命令抓包（详见日志提取2、2、2、6章节），同时提取nea日志，反馈omc支持人员进行定位。 基站配置数据无法同步问题排障方法：1) 检查基站的OM链路是否正常，可通过从OMC服务器侧ping基站，或者使用LMT-B登陆基站观察基站侧的OM链路连接状态；2) 检查NEA进程是否正常；3) 使用L

15、MT-B登陆基站，检查管理站信息和文件服务器信息是否设置正确。性能报表无法正常提取问题排障方法：检查基站侧是否正常上报，有可能是基站侧ATA空间不足，无法生成上报文件，同时核查LMT节点是否配置了性能上报。1) 检查jboss和pc进程是否正常运行；2) 检查登陆用户是否有报表管理和提取报表的权限；3) 检查是否正确的创建了性能任务；4) 使用第三方FTP工具（如fxp）使用omcrftp用户登录服务器，尝试下载和上传文件操作，观察是否可正常连接；5) 如果以上步骤均正常，请提取服务器（jboss）的pm日志和OMT的omt、log反馈omc支持人员进行分析。命令行操作无法正常执行命令排障方法

16、：1) 检查server和nea进程是否正常运行；2) 检查登陆用户是否具有命令行操作权限；3） 检查执行命令对应基站的连接状态，如果基站断连，请先按照基站OM链路保活失败问题处理；4） 如果以上检查均正常，提取OMT端的omt、log和服务器端的mml、log以及NEA的nea、log，反馈OMC支持人员进行分析定位。维护PC机问题第一次安装OMC软件后会出现“连接服务器失败”对话框问题。（处理办法：检查PC机c盘路径下windowssystem32driversetchosts文件。里面有一条路由 localhost 0（IP地址为OMC服务器地址）注：以写字本格式打开。

17、1.2 日志提取要求1.2.1 ENB日志相关 ENB日志提取说明基站问题提取日志原则：现场发现的基站相关问题，需要反馈给支撑人员分析的，首先要提取对应站点的公共日志，若问题与RRU相关的，则需要提取RRU的全部日志。如果现场人员可以区分到对应的问题种类，如表所示，可以按照对应问题的种类提取相应日志。问题编号问题归类获取日志其它需求1所有问题重要过程日志、告警日志、异常日志、当前运行配置文件、数据一致性文件2业务问题DSP的核1，3，4/上行BLER、下行BLER日志L2日志参见业务篇日志提取部分3GPS问题SCT的71日志是否级联是否使用功分器GPS故障状态4RRU接入问题动态

18、配置文件哪个RRU不能接入RRU日志5RRU通道问题RRU日志哪个RRU的哪个通道有故障6PTN传输问题数据一致性文件长ping 1500包的截图动态配置文件SCT的71号日志 （连续提取2次）SCTP快照日志7小区激活问题SCT的71号日志小区公共过程跟踪8主站板卡无法登陆SCT的1、71号日志查看板卡RUN灯的状态 登陆OSP后的打印消息是否可以PING通物理地址和逻辑地址10DSP故障DUMP快照日志，SCT的1、71号日志，BCP板卡上DSP0的20-24；DSP1的25-29；DSP2的30-34；11高层信令问题CDL日志、53号日志12校准问题小区建立所对应DSP 核3的2号校准

19、日志 和 RRU日志 ENB日志提取方法公共日志提取方法：使用LMT提取公共日志的方法：打开LMT 连接对应基站，点击顶部菜单的“日志管理”-“设备日志管理”，可打开日志提取界面，如下图所示，勾选需要提取的日志，设置上传路径后点击确定即可。使用OMT提取公共日志的方法：1.打开OMT 的操作维护终端的OMC内部模板 【日志】2.打开【日志】进入UMS操作维护终端（核心网监控）日志操作网元日志上传ENB公共日志3.打开【ENB公共日志上传】对话框 选择【网元】以及【日志类型】4. 选择正常的文件保存路径 【启动】上传操作 日志上传成功使用OMT提取基站的配置数据方法：1.打开OMT

20、 的操作维护终端的OMC内部模板【OMC】2.点击OMC后打开网络管理与维护终端界面，选择备份管理配置数据备份3.打开配置数据备份界面查询网元友好名 例如污水处理厂4.查询到基站后选择配置数据保存路径以及按网元数据备份 操作成功CDL日志提取方法：（CDL日志分为信令CDL与业务CDL日志）1. 远端使用OMC提取CDL方法：使用FTP软件登陆OMC服务器地址，OMC服务器CDL存放路径为/export/home/omclftp/cdl/.2. 近端登录设备为例，设置CDL日志到PC机路径下方法： LMT连接到基站后设置CDL日志路径步骤，打开调试节点CDL信息右键修改CDL路径如下图：CDL

21、服务设置上传步骤： 打开LMT软件平台的同时会有FTP Server伴随着一起打开。设置FTP方法如下:点击User AccountsUsers框add添加如图AAAA 。设置FTP的密码：设置FTP上传CDL日志的路径.如图：FTP设置完成后如图注意：上传业务CDL比上传信令CDL多一个步骤：需要打开业务面定位CDL开关 操作步骤：LMT连接到基站后点击小区修改业务面定位CDL开关 如图开关状态为：打开PL日志提取方法：PL目前已有的日志及其分布如下：日志类型日志描述日志编号所在核日志内容NB_LOGTYPE_PL_AC_INFOAC校准日志23AC校准相关NB_LOGTYPE_PL_ULB

22、LER_INFO上行BLER监测日志31ULCC统计项、瞬时抓数（调度及天线口原始数据）3M1统计项、瞬时项（功率相关项及测量项）NB_LOGTYPE_PL_DLBLER_INFO下行BLER监测日志43DL SCH统计项、瞬时抓数（调度及处理中间过程数据及功率、超时等）4DL CCH统计项、瞬时抓数（调度功率、超时等）NB_LOGTYPE_PL_PUCCH_INFOPUCCH监测日志52PUCCH相关统计项、瞬时抓数具体操作：1. LTE设备->5216->小区->测试开关->PL用户日志2. 右键->修改PL用户日志->设置PL配置用户日志参数日志记录指

23、示：打开，确定。此时可根据默认配置参数进行PL日志的记录。如对周期等有特殊要求，也可进行修改，但务必在参数的取值范围内。3. 日志管理->设备日志管理->板卡日志4. 选择要提取的处理器及其日志。如下图：提取DSP0上核1的“3 上行BLER监测日志”，需要注意左侧“板卡日志”框中的对应行（下图中蓝色行），需要打钩，未打钩提取不出来，如蓝色行下面核2的5号日志，虽有选择但未打钩，其实未做提取。5. 上传到指定位置，确定。上传完成后，在“信息浏览”框中会显示“文件.lgz上传成功”信息；如上传不成功，建议上传路径不包含中文字符，且不带有空格等特殊字符，重新尝试上传。L2日志提取方法：

24、1. 小区测试开关MAC测试开关设置L2日志类型。2. 根据需要选择需要提取的日志，在不确定的情况下，请提取ping过程日志或与研发联系。3. 日志管理设备日志管理4. 板卡日志-对应DSP的核4和核5上-点击L2远程日志（如果当前小区不是建在第一个DSP上，需要在其他的DSP上对应的Core提取日志）5. 设置好上传日志文件的路径，就可以提取日志了。1.2.2 OMC日志相关 OMC日志提取说明1）服务器的日志信息 服务器日志文件用于记录各服务器运行情况、数据库读写错误、用户操作日志等消息，共11类：boot、log，cm、log，common、log，fm、log，lm、lo

25、g， pm、log，sec、log，server、log，sm、log，tm、log，topo、log。文件存放在安装路径的以下目录中：服务器安装目录/jboss/server/default/log/。-& 注意： 服务器日志文件大小达到上限时，系统自动将其复制到历史日志文件中，历史日志文件的后缀为数字。如配置服务器日志文件cm、log存满后，系统自动将其复制为cm、log、1，并清空cm、log。-2）OMT的日志信息 OMT日志文件用于记录用户操作信息和网元上报的事件信息。单机版OMT日志文件存放在以下目录中：$OMT安装路径log。3）NEA的日志信息NEA日志文件用于记录经过

26、NEA的用户操作及其响应、nea/PerfCollect程序运行情况和性能数据上报情况。NEA日志文件存放在以下目录中：$NEA安装路径log。 OMC日志提取方法1. ORACLE日志提取方法介绍。1) ORACLE alert日志提取说明：alert日志记录的是ORACLE的一些实例级别的变化，对数据库的任何配置的修改和数据库的任何异常都将记录在alert日志中，在数据库发生问题时，能够第一时间的定位到数据库的问题所在。alert日志路径：$ORACLE_HOME/admin/实例名/bdump下以alert打头的文件。可以尝试使用如下命令：cd $ORACLE_BASE/a

27、dmin/$ORACLE_SID/bdump。2) AWR报告的提取方法：进入$ORACLE_HOME/rdbms/admin目录，在sqlplus下运行$ORACLE_HOME/rdbms/admin/awrrpt、sql脚本，按照提示一步一步就可以达成，导出的格式有两种，txt格式和html格式，用html格式的比较好看一点。具体操作方法如下：bash-3、00$ echo $ORACLE_HOME/export/home/oracle/product/10、2、0bash-3、00$ cd /export/home/oracle/product/10、2、0/rdbms/admin/ba

28、sh-3、00$ sqlplus / as sysdbaSQL*Plus: Release 10、2、0、1、0 - Production on Thu Oct 14 16:55:19 2010Copyright (c) 1982, 2005, Oracle、  All rights reserved、Connected to:Oracle Database 10g Enterprise Edition Release 10、2、0、1、0 - 64bit ProductionWith the Partitioning, OLAP and Data Mining optionsSQL

29、> /export/home/oracle/product/10、2、0/rdbms/admin/awrrpt、sql;Current Instance   DB Id    DB Name      Inst Num Instance- - - - 3664984659 V233                1 v233Spec

30、ify the Report TypeWould you like an HTML report, or a plain text report?Enter 'html' for an HTML report, or 'text' for plain textDefaults to 'html'Enter value for report_type: htmlType Specified:  htmlInstances in this Workload Repository schema   DB Id &

31、#160;   Inst Num DB Name      Instance     Host- - - - -* 3664984659        1 V233         v233         M4000Using 3664984659 for

32、database IdUsing          1 for instance numberSpecify the number of days of snapshots to choose fromEntering the number of days (n) will result in the most recent(n) days of snapshots being listed、  Pressing <return> withoutspecifying a number

33、 lists all completed snapshots、Enter value for num_days: 3Listing the last 3 days of Completed Snapshots                                

34、0;                       SnapInstance     DB Name        Snap Id    Snap Started    Level- - - - -v233

35、60;        V233               659 12 Oct 2010 00:00      1                  

36、0;             660 12 Oct 2010 01:00      1                            

37、0;   661 12 Oct 2010 02:00      1                                662 12 Oct 2010 03:01    

38、  1                                663 12 Oct 2010 04:00      1        

39、0;                       664 12 Oct 2010 05:00      1                  

40、0;             665 12 Oct 2010 06:00      1                            

41、0;   666 12 Oct 2010 07:01      1                                667 12 Oct 2010 08:00    

42、  1                                668 12 Oct 2010 09:00      1        

43、0;                       669 12 Oct 2010 10:00      1                  

44、0;             670 12 Oct 2010 11:01      1                            

45、0;   671 12 Oct 2010 12:00      1                                672 12 Oct 2010 13:00    

46、  1                                673 12 Oct 2010 14:00      1        

47、0;                       674 12 Oct 2010 15:00      1                  

48、0;             675 12 Oct 2010 16:00      1                            

49、0;   676 12 Oct 2010 17:00      1                                677 12 Oct 2010 18:00    

50、  1                                678 12 Oct 2010 19:00      1        

51、0;                       679 12 Oct 2010 20:00      1                  

52、0;             680 12 Oct 2010 21:00      1                            

53、0;   681 12 Oct 2010 22:00      1                                682 12 Oct 2010 23:00    

54、  1                                683 13 Oct 2010 00:00      1        

55、0;                       684 13 Oct 2010 01:01      1                  

56、0;             685 13 Oct 2010 02:00      1                            

57、0;   686 13 Oct 2010 03:00      1                                687 13 Oct 2010 04:00    

58、  1                                688 13 Oct 2010 05:00      1        

59、0;                       689 13 Oct 2010 06:00      1                  

60、0;             690 13 Oct 2010 07:00      1                            

61、0;   691 13 Oct 2010 08:00      1                                692 13 Oct 2010 09:00    

62、  1                                693 13 Oct 2010 10:00      1        

63、0;                       694 13 Oct 2010 11:00      1                  

64、0;             695 13 Oct 2010 12:00      1                            

65、0;   696 13 Oct 2010 13:00      1                                697 13 Oct 2010 14:00    

66、  1                                698 13 Oct 2010 15:00      1        

67、0;                       699 13 Oct 2010 16:00      1                  

68、0;             700 13 Oct 2010 17:00      1                            

69、0;   701 13 Oct 2010 18:00      1                                702 13 Oct 2010 19:00    

70、  1                                703 13 Oct 2010 20:00      1        

71、0;                       704 13 Oct 2010 21:00      1                  

72、0;             705 13 Oct 2010 22:00      1                            

73、0;   706 13 Oct 2010 23:00      1                                707 14 Oct 2010 00:01    

74、  1                                708 14 Oct 2010 01:00      1        

75、0;                       709 14 Oct 2010 02:00      1                  

76、0;             710 14 Oct 2010 03:00      1                            

77、0;   711 14 Oct 2010 04:00      1                                712 14 Oct 2010 05:00    

78、  1                                713 14 Oct 2010 06:00      1        

79、0;                       714 14 Oct 2010 07:00      1                  

80、0;                                     SnapInstance     DB Name      &

81、#160; Snap Id    Snap Started    Level- - - - -v233         V233               715 14 Oct 2010 08:00      1    

82、0;                           716 14 Oct 2010 09:00      1              

83、0;                 717 14 Oct 2010 10:01      1                         

84、60;      718 14 Oct 2010 11:00      1                                719 14 Oct 2010 12:00

85、      1                                720 14 Oct 2010 13:00      1    

86、0;                           721 14 Oct 2010 14:00      1              

87、0;                 722 14 Oct 2010 15:00      1                        

88、0;       723 14 Oct 2010 16:00      1Specify the Begin and End Snapshot IdsEnter value for begin_snap: 669Begin Snapshot Id specified: 669Enter value for end_snap: 670End   Snapshot Id specified: 670Specify the Report NameThe default r

89、eport file name is awrrpt_1_669_670、html、  To use this name,press <return> to continue, otherwise enter an alternative、Enter value for report_name: 回车将会在/export/home/oracle/product/10、2、0/rdbms/admin/ 目录下生成awrrpt_1_669_670、html文件。 说明：一般snap_id相隔间隔为1小时，因此建议不要超过2小时，如果现网有问题，一般多发生于凌晨或忙时，一般取AWR报告就要尽可能缩短时间点，上面提的snap的id介于669，670之间1小时足够。尽量不要超过2小时，否则结果不具体可分析性了。除非支持人员有特别要求。2. Solaris操作系统系统日志提取说明(explorer包)Solaris服务器