IPRAN故障案例分析可编辑范本

基站闪断故障案例分析摘要:某IPＲAN站点在运行过程中出现频繁的设备闪断故障，造成此站点下挂4个3G站、3个4G站业务频繁闪断.背景２０1６年8月２4日上午在网优人员给局方维护人员打来电话,说有数个站点出现频繁断站，然后过几分钟就好;我方工程师在收到局方告知后，立即与维护人员取得联系,为了不影响局方的业务以及考核指标，决定先将此站点下挂的站点端口进行关闭处理.问题描述及排查登录到闪断的设备上,一般成环的节点很少会出现瞬断,但是不排除.首先检查瞬断节点的收发光功率;如果没问题就逐条检查环上的其他节点的光功率。一般情况下是光口实际收光超出临界值；zｘr10#sｈoｗpｅrf—vaｌｕeinｔeｒfaceｇｅi＿5/1laser-basis－cuｒ(mA）：6.８160laser—basis－mｉn（ｍA):6.81６0lａｓｅr-basis－ｍａｘ(mA):6。8480lａser-tｅmp-ｃｕr(ｄｅg):３9。84３0laser—teｍp—min（ｄeｇ):３9。5620laｓeｒ-ｔemp-mａx（deg)：3９。8430oｐｔicａl-sｅnd－cｕr（dBm)：-6.165０oｐtｉｃaｌ—sｅnd—ｍｉn(dBm)：-6.1６7０ｏｐticaｌ-send-max(dＢm):—6．1650optical—rｃv-cur(ｄBm）:-7.503０optical—rcｖ-mｉｎ(dBm）:—7.５100ｏptical-ｒｃv-max（dＢｍ）:-7。5000seｎd—baｎdwidｔh-usagｅ:0。０131rcv—baｎdwidｔｈ—ｕsage：0．02１3zｘr10＃ｓhowpeｒf—ｖalueinterfacegei_6／1laser—basis-cuｒ(ｍA）:１7.75００lａｓｅr—basis-min(mA）：1７.７5０0laser—ｂasis—ｍax(mA）：17.８000laｓer－teｍp-cuｒ(ｄeg):3３.2２60laser-temp-miｎ（ｄｅｇ)：33。226０laser—ｔeｍp—ｍａx(ｄｅg):３３.２2６0opticaｌ—send-cｕｒ(dBm):－5．91９0ｏptical—send—min（dBm):－5．9190optiｃａl-ｓend—max(ｄBｍ)：-５。8８５0oｐticａｌ—rｃｖ-cur(dBm)：—7。2490optical—rｃｖ—min（dBm):—7。３6８0ｏｐtiｃaｌ－rcv—mａx(dＢｍ）：-7．２490ｓｅnｄ—ｂandｗidth—usａgｅ:0。００１6ｒｃv—bandwidth-usａge:0．0０08检查设备温度,看风扇状态:设备温度过高会导致板卡假死,当温度降到板卡可以承受的温度的时候，板卡又会起来，所以就会出现闪断.zxr10#ｓhowversioｎZXR10RouterOｐeratinｇSystemSｏfｔwａre,ZTEＣｏrｐoratｉonZＸR10ROSVeｒsionV４。08．34ＺＸCTN6220Soｆtware，VｅｒsｉonＺXCTＮ620063０062２0Ｖ2。10。０0P02B１0,RＥLEASEＳOFTＷAＲECopｙｒigｈt（c)200１—２０14ｂyＺTＥCorporaｔiｏｎComｐiledApｒ２４201５，1８：46:39Sｙｓtemimaｇefileｓａreflａsh:〈／flasｈ/img/zxr10。zａr＞Systemuｐｔimｅis244dａy(s）,16ｈｏuｒ（s），53ｍinｕte（s）[ＳCCU，pａnel１,mａｓｔｅr］ＭａinProcesｓor：ＰowｅrPCMPC８54４ProcessoｒＳystｅmMemory：１0２4Mbｙteｓ,SystemFＬASH:12８MbｙｔesＳystemＮＶRAM:8Kbytes,SｙstemTeｍperａtｕre:4１℃SyｓtemＳerial:１６383，SｙｓtemBaｕdRaｔｅ:９60０SysｔemCloｃｋ:PTPstratum3BoａｒdTypｅ：ＲSCCＰ2SｅriａlＮuｍber:2697766011５2,PａrtNｕmber:１２33５3851００３MaiｎCＰLD１Vｅrsion：V１．4，ＭainＣＰLD２Ｖｅrsioｎ:V1。４CＰUCＰＬDVeｒsion:N／Ａ,ＰＣIＣPLDVersioｎ:N/ＡFPＧＡVerｓiｏn:V６.１,MａiｎPＣBNumｂer:１０１001［SCCU,ｐａneｌ2,slaｖｅ]MaｉnProcｅｓｓoｒ:ＰｏweｒPCＭＰC85４4PrｏcessoｒSｙsteｍMemory:1０２4Mbyｔes，SｙstemFLASＨ:1２8MbytesＳｙsteｍＮVＲAM：8Kbytｅs，SysｔemTｅmpｅratｕre:43℃SyｓtemSerial:163８3，SysteｍＢaｕｄRatｅ：960０ＳyｓteｍClock:PTＰstraｔum３BoardTyｐe:ＲＳCＣP2SeriａlＮumber：269７76600138，ＰartＮuｍbｅr:1233５3８5100３MainＣPLＤ1Verｓion:V1．4，MainCPLD2Verｓｉon:V1.4CPＵCPＬDVersｉoｎ:Ｎ/A,ＰCICＰLDＶersion：N/ＡFPGＡVｅrsioｎ:V６。1,MaiｎPＣＢNｕmｂer：１01０0１[ＮPＣI,panｅl１］MaｉｎPrｏｃｅｓｓor:Ｗ90N74０PrｏcessorSystemMemory：16Mbyteｓ,ＳｙｓtemTempeｒａture:Ｎ/ＡBoardＴｙpe:R4ＥGC，ＬogｉcBｏardType:Ｒ4EGC＿EＴHPortNｕｍber:4ＳerialＮｕmbｅr:26949460200８，PaｒtNumbeｒ:1２3３526５1０１5MaｉｎCPLDVｅrsioｎ：V１.８ＦPGAVerｓiｏn：V0.８,ＭainPＣBNumbｅr:08１0０1［ＮPCI，pａnel２］MａinProcessoｒ：ＭPC８321ＰｒocessorSｙstｅmMemoｒy：12８Mbyｔeｓ,SystemTｅmperatuｒｅ:43℃BoaｒdType：R16E1F,ＬogicBoardTｙpe：(TDM+ＩMA)PorｔＮumｂer：１6SeriaｌＮumber：２695３9１０110５,PａrtNｕmber:12335265１023MainCPLＤＶeｒsｉon：V２.3FPGAVerｓｉoｎ:V2．１,ＭaｉnPCBNumber：0８090２[NPＣI,pａnel5]MａinPｒocesｓor：W90N740PrｏcｅssorSｙstemMemory:16Mbytes,SyｓteｍTeｍperａｔｕre：4３℃BoａrｄType：Ｒ4ＥGC，LogｉｃBoarｄType:R4EGC_EＴHPortＮumbｅｒ:4SeｒiaｌNuｍbｅｒ:269494601680，PartＮuｍber：１2３35２651０15MainCPＬDVｅrsiｏn:Ｖ１。8ＦPGＡVeｒsion：Ｖ０．８，MainPCBNumber：0８1００1［NPＣI,panel6]ＭaｉnPrｏcｅssor:Ｗ９０Ｎ740ＰｒocessorSysteｍMemｏｒｙ：16Ｍbｙteｓ,SystemTeｍｐeｒａture：43℃BoardTyｐe：R4EＧC，LogicＢｏａrdＴype:R4ＥGC＿ETHPｏrtＮumbeｒ:4ＳeriaｌNuｍｂer:27９887200６96,ＰartＮｕmbeｒ:123３52６5１０1５MａinCＰLDVeｒｓiｏn：V1.８FPGAＶｅrsｉｏn:Ｖ０。8,MaiｎPCBＮuｍber:０81001zxｒ１0#sｈowfan－informaｔiｏnPCBVｅｒsion:1０08０１ＬogicaｌVersion:V３。1Fan1：NoｒmalWｏrkFan2：NｏrmaｌＷorｋFａｎ3：ＮoｒmalＷorｋFａn４：NoｒｍalWoｒk查看端口是否有错包，当端口错包累计到一定程度后,很大可能性会出现设备闪断。zxr10#sｈowinterfaｃegei_５/1geｉ_5/１isup，linｅproｔoｃolisup,dｅteｃtstatusｉｓＯＫByｎameiｓnonｅDeｓcriｐtiｏｎisｎonｅTheportiｓopｔicalDupｌexｆulｌＳｍｂipg1２Smbmcｃｂaｎdwiｄth10MｂｉtsMccvlanidｉｓ３02４Ｓmbmccprioｒitｙ7NoloopbackＢW１00０0０0KbｉtｓLastclearｉngof”ｓｈoｗintｅrface”coｕnteｒsnever120seｃondsinpｕtrate：2４２82１4Bps,88２0pps12０seｃondsoutputratｅ:1571４73Bｐs,７1４７ｐpsＩｎterfacepｅakrate：inpｕt2０１6６５2８Bpｓoｕｔｐuｔ8８0６412ＢpsInｔeｒfａceuｔｉlizaｔｉon:inpｕｔ１%,oｕtｐuｔ1%Inpｕt：Ｐackets:1495２35639８8Ｂｙtes:４305364222０163Unicａsts:１4９49３４77935Multicａsts：3０0８6051Broａdｃaｓtｓ：２ＬittUｎdeｒsiｚe：0Overｓｉｚe:0CRC-ＥＲROＲ:2５9１07Dｒｏppｅｄ:２8６9615Fragmｅnts:0Jａｂｂer：０MacRxErr:0Ｅrrfｒame：0Ｄｉsfｒamｅ:2８69615ＵnicErrors：0MulｔiEｒrorｓ:０BrｏErrorｓ：0GoodＪｕｍb:259１０7４6０7６4B：065－1２7B:４4437087８26１28－255B：99５9552083２５6-511Ｂ:8５８０1２45887512－1023B:7465987３8１０24-Ｍａx:8５790７9４54ＡｌiｇnErrｏrs:０Oｕtpuｔ：Packets:1381475６864７Bytｅs：313827６96９29９7Ｕｎicａsｔs：1381１７54565７Multｉｃasts：３0022９86Bｒoaｄｃastｓ:4Ｃollisiｏns：0ＬaｔeCollisiｏn:0ColｌｉＴimeｓ：０ＦlowConｔr:０DｅＥｘceFrａme:0DeｃollｉFｒａ:０NｏnUniFrame：30022990ErrBｙtes:0ErrFｒａme:0MacControl：0JaｂberFｒamｅ:０ＧoｏdJumb:１676040２８LittUndersizｅ:064B：065-１2７B:397０7４127０1128-25５B:1１6073８02８７256—5１1Ｂ：85696141６8８512-10２３Ｂ：53２５9１６１11024—Maｘ：６04０4236０Overｓiｚe:0ｚxｒ１0#sｈｏwinterfaｃegei_6/1gｅｉ_６/1isup，ｌineproｔocoｌisup,deｔectｓｔatusisOKBynameisnoneDesｃｒiptionisnoneTｈeporｔiｓoｐtｉcａlDuplexfuｌlSｍbipg12Smbmccｂandwidth１0MbｉｔｓMccvlａnidiｓ0Smbmcｃprioritｙ7ＮoloopｂａｃkＢW100０0０0ＫｂitｓLａstclｅarinｇof＂sｈoｗinterface”ｃｏｕntersｎeveｒ１２０secondsinpｕｔrａte:834５0Ｂps,８09ｐpｓ120sｅcｏndsｏutpｕtrate:150８18Bps,484ppｓIntｅｒfａcepeaｋrate:ｉnput27８１9２9Bps,output1０98９９89BpｓInteｒｆacｅuｔilｉzatioｎ：iｎput0%,output0%Inｐut:Ｐacｋets:14２2７584５４9Bytes：1259９51８03３10Unicasｔｓulticasts：３0425１56Bｒoadｃａsts：2ＬｉtｔＵnｄerｓizｅ:０Ｏｖｅrsiｚｅ：0CRC—ERROR：0Droppeｄ:34８Fraｇmｅnts:0Jａbbｅｒ：0MacRｘErr:0Ｅrｒｆraｍe：0Disfraｍe:3４8UnｉcEｒrors:０MultiＥrrｏrs：０BｒoＥrrors：０ＧｏｏdJumb：7３２268２6４B：211428046５－12７Ｂ：13323６７2483１28—２55B：７633２69７1256—51１Ｂ:４237５277512-102３Ｂ:33307４４０10２4—Ｍax:43７5957４ＡｌignEｒｒｏrs:0Ouｔpｕt:Pacｋｅｔs：64４４18０94８Bｙｔe