(1)湖南渠道培训之故障排除概述

1、第第1 1章章 故障排除概述故障排除概述ISSUE 2.1日期：杭州华三通信技术有限公司 版权所有，未经授权不得使用与传播n 现在现在H3C网络产品应用越来越普及，网络设备的日网络产品应用越来越普及，网络设备的日常维护和故障管理成为网络维护人员必须具备的一常维护和故障管理成为网络维护人员必须具备的一种能力种能力引入引入n 掌握网络故障排除一般步骤掌握网络故障排除一般步骤n 掌握常用故障诊断工具掌握常用故障诊断工具n 掌握掌握H3C网络产品故障排除常用方法网络产品故障排除常用方法课程目标课程目标学习完本课程，您应该能够：学习完本课程，您应该能够：n 故障排除综述故障排除综述n 常用故障诊断工具简

2、介常用故障诊断工具简介n 故障排除常用方法故障排除常用方法n 对网管人员的要求对网管人员的要求n 故障排除资源故障排除资源目录目录5网络故障排错第一原则网络故障排错第一原则l 网络故障排错的第一原则网络故障排错的第一原则 ？ 业务恢复优先业务恢复优先6网络故障排错第一原则网络故障排错第一原则电信线路联通线路7网络故障排错第一原则网络故障排错第一原则S8512-1接入交换机接入交换机S8512-8网络故障排除基本步骤网络故障排除基本步骤故障现象观察故障现象观察故障相关信息收集故障相关信息收集经验判断和理论分析经验判断和理论分析各种可能原因列表各种可能原因列表对每一原因实施排错方案对每一原因实施排

3、错方案故障排除？故障排除？恢复实施方案前的网络状态恢复实施方案前的网络状态故障排除过程文档化故障排除过程文档化循环循环1循环循环2NY9网络故障一般分类网络故障一般分类l 连通性问题硬件、媒介、电源故障；配置错误；设备兼容性问题。l 性能问题网络拥塞；到目的地不是最佳路由；供电不足；路由环路；网络不稳定。10设备故障信息收集设备故障信息收集4 W=who/what/when/wherel Who? 谁出了问题？谁出了问题？是单个用户、一组存在共性的用户还是网络中的所有用户？l What? 是什么问题？是什么问题？是连通性问题，还是性能差的问题？如果是连通性问题，是完全连通性问题？还是部分连通性

4、问题？l When? 何时产生的？何时产生的？是间歇性问题，还是经常发生的问题，或者是刚刚发生的问题？l Where? 何处出现的？何处出现的？故障发生在核心区域、边缘区域还是接入区域？故障涉及的设备？11设备故障信息收集设备故障信息收集4 W=who/what/when/wherel Who? 谁出了问题？谁出了问题？是单个用户、一组存在共性的用户还是网络中的所有用户？1、单个用户问题，需要关注的方面： （1）物理层问题； （2）该特定主机的硬件问题； （3）主机软件的问题； （4）主机IP地址和掩码的问题； （5）默认网关的问题；2、一组用户问题或是所有用户问题，需要关注的方面： （1）网

5、络设备问题； （2）路由器接口问题； （3）服务器问题； （4）ACL设置问题； （5）VLAN配置问题；12设备故障信息收集设备故障信息收集l What? 是什么问题？是什么问题？是连通性问题，还是性能差的问题？如果是连通性问题，是完全连通性问题？还是部分连通性问题？1、完全连通性问题，需要关注的方面： （1）硬件故障； （2）远程通信服务故障，如：链路故障 （3）路由协议问题； 2、部分连通性问题，需要关注的方面： （1）访问控制列表； （2）子网掩码问题； （3）路由协议不兼容的问题；13案例案例Cisco-1SR66-2SR66-1Cisco-2二级网14设备故障信息收集设备故障信息收

6、集故障现象描述故障现象描述3、对于性能的问题，需要关注的方面： （1）网络拥塞； （2）路由环路； （3）供电不足； （4）非最佳路由15设备故障信息收集设备故障信息收集故障现象描述故障现象描述4 W=who/what/when/wherel When? 何时产生的？何时产生的？是间歇性问题，还是经常发生的问题，或者是刚刚发生的问题？1、对于间歇性的问题，需要关注的方面： (1) 网络拥塞或广播风暴； （2) 路由环路； （3）远程通信服务故障，如：链路故障 （4）网络介质质量差16案例案例思科设备R45-B上间歇上报下面的错误日志：Sep 5 08:47:55.373: %SNASW-3-S

7、CM_LOG_3: PROBLEM - 13286 - Unable to identify or activate the next hop of an ISR session (Message suppressed 180 times)Sep 5 08:51:50.082: %SNASW-3-SCM_LOG_3: PROBLEM - 13660 - Unable to identify or activate the next hop of an ISR session Sep 5 08:51:51.887: %SNASW-3-SCM_LOG_3: PROBLEM - 13662 - Un

8、able to identify or activate the next hop of an ISR session (Message suppressed 150 times)17设备故障信息收集设备故障信息收集2、对于刚刚发生的问题，需要关注的方面： (1) 新增设备或是拓扑改变； （2) 新的硬件故障或介质故障； （3）ACL、IP地址等重新配置； （4）路由协议发生变化；18设备故障信息收集设备故障信息收集4 W=who/what/when/wherel Where? 何处出现的？何处出现的？故障发生在核心区域、边缘区域还是接入区域？涉及那些设备？19案例：广播流量引起的案例：广播流

9、量引起的FTP业务问题业务问题l /16为一个用户网段；为一个用户网段；18为一为一个日志服务器；个日志服务器；/16是一个集中了很多应是一个集中了很多应用服务器的网段。用服务器的网段。 l 用户反映：日志服务器与：日志服务器与/16网段的备份网段的备份服务器间备份发生问题！服务器间备份发生问题！D:3/16B:53/16A:18/16C:20/20案例：广播流量引起的案例：广播流量引起的FTP业务问题业务问题l 故障相关信息收集（1）W

10、ho：哪个或哪些局域网服务器受到影响，地址是 什么？其他网段是否有问题？ /16网段的机器与备份服务器间进行FTP传输时速 度正常为7Mbps，与日志服务器间进行FTP传输时速度慢， 只有0.6Mbps；21案例：广播流量引起的案例：广播流量引起的FTP业务问题业务问题l 故障相关信息收集（2）What：是完全不能备份，还是备份的速度慢（即性能下降）？（3）When：什么时候会出现问题？这个问题是连续出现，还是间断出现的？ 在非高峰期日志服务器和备份服务器间FTP传输速度正 常，大约为6Mbps。在高峰期，速度大约为0.7M bps. 最近/16网段的客户

11、机不断在增加； （4）Where：涉及哪些设备？ 22案例：广播流量引起的案例：广播流量引起的FTP业务问题业务问题l经验判断和理论分析经验判断和理论分析l各种可能原因列表各种可能原因列表日志服务器日志服务器A的性能问题；的性能问题；网络的网关性能问题；网络的网关性能问题；网络本身的性能问题；网络本身的性能问题；D:3/16B:53/16A:18/16C:20/23案例：广播流量引起的案例：广播流量引起的FTP业务问题业务问题l 对每一原因实施排错方案；l 观察故障排除结果

12、；l 循环进行故障排除过程：当针对某一可能原因的排错方案没有达到预期目的，循环进入下一可能原因制定排错方案并实施；当所有可能原因列表的排错方案均没有达到排错目的，重现进行故障相关信息收集以分析新的可能原因。l 案例可能故障循环分析定位故障：最近大量用户加入导致网段上广播包过多；排除故障：把日志服务器移到/16网段。 24案例：广播流量引起的案例：广播流量引起的FTP业务问题业务问题l 故障排除过程文档化故障排除过程文档化故障现象描述及收集的相关信息；网络拓扑图绘制；网络中使用的设备清单和介质清单；网络中使用的协议清单和应用清单；故障发生的可能原因；对每一可

13、能原因制定的方案和实施结果；本次排错的心得体会；其他：如排错中使用的参考资料列表等。 25常用故障诊断命令简介常用故障诊断命令简介l H3C网络设备故障诊断主要有以网络设备故障诊断主要有以下命令：下命令：2626Ping命令命令l Ping命令简介命令简介comware平台的ping命令ping -a X.X.X.X -c count -s packetsize ip-addressRTARTBEth0/0:/8S0/0:/8S0/0:/8Eth0/0:/8Ping a c 100 s 1500 例子：在RT

14、A路由器上2727Ping命令命令l Ping命令简介命令简介window平台的ping命令ping -n count -l packetsize -t ip-addressPing n 100 l 1500 例子：在主机上2828Ping命令命令l 案例：案例：A能能ping 通通B，B一定能一定能ping 通通A吗？吗？在RTA上可以ping 通RTB上的接口地址，在RTB上是否可以ping通RTA上的接口地址？RTARTBEth0/0:/8S0/0:/8S0/0:/8Eth0/0:/2929

15、Tracert命令命令l Tracert命令简介命令简介comware平台的tracert命令tracert -a X.X.X.X 30Tracert命令命令lTracert命令简介Windows平台的tracert命令l案例：使用tracert命令定位配置不当的网络点l某校园网中，主机某校园网中，主机访问数据库服务器访问数据库服务器，用户抱怨访，用户抱怨访问性能差。问性能差。E0/0:/8S0/0:/8E0/1://8S0/1:/8S1/0:/8S1/1:/8E0/

16、0://8E0/0:/31Tracert命令命令登录到RTC，使用带参数的ping命令，ping远端服务器，显示如下：RTCping -c 10 -s 4000 -t 6000 PING : 4000 data bytes, press CTRL_C to break Reply from : bytes=4000 Sequence=0 ttl=249 time = 552 ms Reply from : bytes=4000 Sequence=1 ttl=249 time =

17、5733 ms Reply from : bytes=4000 Sequence=2 ttl=249 time = 552 ms Reply from : bytes=4000 Sequence=3 ttl=249 time = 5714 ms Reply from : bytes=4000 Sequence=4 ttl=249 time = 552 ms Reply from : bytes=4000 Sequence=5 ttl=249 time = 5711 ms Reply from : bytes=4000 Seq

18、uence=6 ttl=249 time = 552 msRTC上，tracert远端RTA的以太网接口。RTCtracert -q 8 traceroute to () 30 hops max,40 bytes packet 1 6 ms 4 ms 4 ms 4 ms 4 ms 4 ms 4 ms 4 ms 。 5 20 ms 16 ms 15 ms 16 ms 16 ms 16 ms 16 ms 16 ms 6 30 ms 278 ms 25 ms 279 ms 25 ms 278 m

19、s 25 ms 277 32Tracert命令命令这两路由器间有一主一备两串行链路，主链路为2.048Mbps（s0/0口之间），备份链路为128Kbps（s0/1口之间。网络管理员在此两路由器间配置了静态路由。RTB上如下配置：RTBip route-static RTBip route-static RTA上如下配置：RTAip route-static RTAip route-static 33Tracert命令

20、命令由于管理员配置时没有给出静态路由的优先级，这两条路由项的优先级就同为缺省值60，于是就同时出现在路由表中，实现的是负载分担，而不能达到主备的目的。处理方法：RTB上进行如下更改：RTBip route （主链路仍使用缺省优先级60）RTBip route 100（备份链路的优先级降低至100）RTA上进行如下更改：RTAip route-static RTAip route-static 100

21、这样，只有当主链路发生故障，备份链路的路由项才会出线在路由表中，从而接替主链路完成报文转发，实现主备目的。34故障排除常用故障排除常用display命令命令l display versionl display current-config l display saved-config l display interface 35display versiondis version H3C Comware Platform SoftwareComware software, Version 5.20, Beta 1204P04, StandardCopyright(c) 2004-2007 Ha

22、ngzhou H3C Technology Co., Ltd. All rights reserved.H3C MSR20-21 uptime is 0 week, 0 day, 6 hours, 32 minutesLast reboot 2007/03/22 09:00:45System returned to ROM By Power-up.CPU type: FREESCALE PowerPC 8248 400MHz256M bytes SDRAM Memory4M bytes Flash MemoryPcb Version: 3.0Logic Version: 3.0Basic Bo

23、otROM Version: 2.07Extend BootROM Version: 2.07SLOT 0CON (Hardware)3.0, (Driver)1.0, (Cpld)3.0SLOT 0AUX (Hardware)3.0, (Driver)1.0, (Cpld)3.0SLOT 0ETH0/0 (Hardware)3.0, (Driver)1.0, (Cpld)3.0SLOT 0ETH0/1 (Hardware)3.0, (Driver)1.0, (Cpld)3.0SLOT 0ETH0/2 (Hardware)3.0, (Driver)1.0, (Cpld)3.0SLOT 0ETH

24、0/3 (Hardware)3.0, (Driver)1.0, (Cpld)3.0SLOT 0ETH0/4 (Hardware)3.0, (Driver)1.0, (Cpld)3.0SLOT 0ETH0/5 (Hardware)3.0, (Driver)1.0, (Cpld)36display current-config& display saved-config l 显示当前设备配置文件信息l 把启动配置文件存放到路由器以外的其他设备上 使维护人员能够迅速配置一个替代的路由器； 将该配置文件通过E-mail形式发给技术支持人员以帮助定位配置问题。 37debugl debug命令概述获得路

25、由器中处理的报文和帧的细节信息 debug配置l debug命令使用注意事项 不使用debug命令监控正常的网络运行在网络使用的低峰期使用不要轻易使用该debug命令 不要轻易使用类似debug all之类的命令 定位操作完成后，应立即以“undo debug xx”命令终止debug命令的执行。l display和debug命令配合使用 3838display interfaceo端口信息显示命令：端口信息显示命令： display interfaceQuidway display interface ethernet0/1Ethernet0/1 current state : UPIP S

26、ending Frames Format is PKTFMT_ETHNT_2, Hardware address is 00e0-fc00-0010Description : aaaThe Maximum Transmit Unit is 1500Media type is twisted pair, loopback not setPort hardware type is 100_BASE_TX100Mbps-speed mode, full-duplex modeLink speed type is autonegotiation, link duplex type is autoneg

27、otiationFlow-control is not supportedThe Maximum Frame Length is 1536Broadcast MAX-ratio: 100%3939display interfaceo端口信息显示命令：端口信息显示命令： display interfacePVID: 1Mdi type: autoPort link-type: access Tagged VLAN ID : none Untagged VLAN ID : 1Last 5 minutes input rate 229 bytes/sec, 2 packets/secLast 5 m

28、inutes output rate 25 bytes/sec, 0 packets/secinput: 0 packets, 0 bytes / input 的报文数的报文数 0 broadcasts, 0 multicasts input: 0 input errors, 0 runts, 0 giants, 0 throttles, 0 CRC 0 frame, 0 overruns, 0 aborts, 0 ignored, 0 parity errors Output: 0 packets, 0 bytes / output 的报文数的报文数 0 broadcasts, 0 multicasts, 0 pauses Output: 0 output errors, 0 underruns, 0 buffer failures 0 aborts, 0 deferred, 0 collisions, 0 late collisions 0 lost carrier, 0 no carrier n 故障排除综述故障排除综述n 常用故障诊断工具简介常用故障诊断工具简介n 故障排除常用方法故障排除常用方法n 对网管人员的要求对网管人员的要求n 故障排除资源故障排除资源目录目录41故障排除常用方法故障排除常用方法l 分层故障排除法 l 分块故