锐捷端口无法UP排查SOP

一、故障现象交换机接口不UP包含电口接口不UP和光口接口不UP,以及接口指示灯状态不一致问题。二、组网拓扑三、可能原因针对光接口不UP可能的原因端口没有收光对端模块或者光纤问题;光模块异常;端口异常;双工速率协商问题;设备芯片异常phy芯片、MAC芯片、M0芯片挂死该芯片只存在于7910E设备、S78设备的F系列线卡;针对电接口不UP可能的原因网线问题;端口问题;双工速率协商问题;设备芯片异常比如phy芯片、MAC芯片、M0芯片挂死该芯片只存在于7910E设备、S78设备的F系列线卡;针对接口指示灯状态不一致可能原因盒式设备POE按钮导致接口指示灯状态不一致问题;线卡版本不一致或者线卡处于生测模式;设备芯片异常比如phy芯片、MAC芯片、M0芯片挂死该芯片只存在于7910E设备、S78设备的F系列线卡;四、故障排查步骤针对光接口不up排查如下1.检查接口收发光情况两端均需通过命令show int xxx tra 查看接口收发光以及电流信息是否正常OK查看情况如下光衰数值正常范围是-1~-14之间具体参见光模块手册存在收发光问题对应接口会有warning或者alarm如果收光太弱说明对端模块或者光纤存在问题需要排查对端的发光情况对端发光正常则需要更换光纤测试如果发光异常需要检查接口是不是被手动down了或者触发某个功能导致被disable命令如下show int statusshow int status errorshow int status error2、检查接口速率协商相关检查是否是万兆口插千兆光模块若是的话通常需要强制双工速率为千兆全双工否则概率性出现单边link up或者接口不UP的现象。或者对接友商设备时出现端口不up时可以通过双端强制双工速率明确是否为双工速率协商问题3、确认是否是我司模块通过外观查看是否是我司光模块或者通过命令show int xxx tra manu查看Vendor Name是否是RUIJIE若非我司模块不保证使用效果需要更换为我司模块通过外观查看是否是我司光模块或者通过命令show int xxx tra manu查看Vendor Name是否是RUIJIE若非我司模块不保证使用效果需要更换为我司模块4、确认是否是M0芯片挂死问题M0芯片只存在于S7910E设备、S78设备的F系列线卡如FB线卡M0芯片挂死的原因一般是接口存在频繁震荡导致,可通过命令show int link-state-change statistics 先查看是否有某些接口震荡次数很频繁然后进入底层进一步确认如下run-system-shelllc xxx //xx代表线卡槽位号debug-ssam0 status进入线卡确认线卡的m0芯片挂死not running代表挂死进入线卡确认线卡的m0芯片挂死not running代表挂死若命中此M0芯片挂死问题临时规避方案可以拔插对应线卡或者整机重启彻底解决方案升级对应解决版本S7900_RGOS12.5(4)B0501、S7800C_RGOS12.5(4)B02015、接口替换测试通过替换端口测试快速判断是不是端口问题若发现只有如果连续4个或者8个端口都存在问题可以初步判断是设备phy芯片问题确认方式如下封shell以及10.X老版本信息收集参照速查信息收集run-system-shelllc xxx 线卡槽位号debug-ssaphy allphy all6、检查设备phy芯片及mac芯片是否正常适用11x底层通过phy以及mac自环测试确认是否phy芯片以及MAC芯片是否存在问题先通过以下指令明确面板端口对应底层芯片端口run-system-shell 封shell以及10.X老版本信息收集参照速查信息收集lc 2-----线卡槽位号debug-ssa 或者debug-ssa 2 命令进入线卡底层也可以sdssaport ddev //lport对应设备物理实际的接口号即对应线卡物理接口1口底层显示的为lport 1在底层对应的名称为xe0后续查看端口流量以及接口状态均已xe0的状态为准。ssaport ddev //lport对应设备物理实际的接口号即对应线卡物理接口1口底层显示的为lport 1在底层对应的名称为xe0后续查看端口流量以及接口状态均已xe0的状态为准。然后使用端口底层自环底层自环是否能够亮在模式置位phy时ps查看是否交换机端口是否会亮会亮说明phy芯片无问题在模式置位phy时ps查看是否交换机端口是否会亮会亮说明phy芯片无问题在模式置位phy时ps查看是否交换机端口是否会亮会亮说明phy芯片无问题在模式置位mac时ps查看是否交换机端口是否会亮会亮说明mac芯片无问题在模式置位mac时ps查看是否交换机端口是否会亮会亮说明mac芯片无问题在模式置位mac时ps查看是否交换机端口是否会亮会亮说明mac芯片无问题若MAC芯片与phy芯片均无异常合理怀疑是端口RJ45的硬件问题建议返厂维修在模式置位none取消端口自环在模式置位none取消端口自环针对电接口不up排查如下1、确认是否是M0芯片挂死问题具体参考上面光接口不up排查里的M0挂死确认2、接口替换测试通过替换测试替换网线或者终端明确故障现象是否随着端口走若故障现象随着接口走查看异常端口是否是连续4个接口或者连续8个接口出现异常若是可能是phy芯片出现异常可以通过底层phy自环测试明确phy自环方式参考上面光接口不up排查里的phy自环测试3、检查双工速率协商相关可能存在网络质量问题或者设备网卡限制无法通过自协商完成双工速率的协商可以通过强制百兆全双工以及强制千兆全双工明确针对接口指示灯状态不一致排查如下1、明确是否POE按钮导致明确一下设备是否为盒式POE交换机若为盒式POE交换机可能按了POE按钮使得只有正在供电的接口亮灯可以让客户长按2秒以上POE按钮切换回显示数据传输的模式 即可让传输速率的接口亮灯明确一下设备是否为盒式POE交换机若为盒式POE交换机可能按了POE按钮使得只有正在供电的接口亮灯可以让客户长按2秒以上POE按钮切换回显示数据传输的模式 即可让传输速率的接口亮灯2、确认是否是M0芯片挂死问题具体参考上面光接口不up排查里的M0挂死确认3、检查线卡与引擎卡版本是否一致线卡版本与引擎卡不一致会导致对应底层端口进程无法正确将接口状态信息同步给与引擎具体可以通过show version明确如下是版本不一致的举例线卡版本与引擎卡不一致会导致对应底层端口进程无法正确将接口状态信息同步给与引擎具体可以通过show version明确如下是版本不一致的举例4、检查线卡是否处于生测模式线卡处于生测模式正常是线卡返修之后硬件人员未将线卡调整成用户模式具体需要使用调试线接线卡串口收集线卡启机日志发现线卡启机日志如下即可明确处于生测模式线卡处于生测模式正常是线卡返修之后硬件人员未将线卡调整成用户模式具体需要使用调试线接线卡串口收集线卡启机日志发现线卡启机日志如下即可明确处于生测模式命中以上问题可以通过以下方法退出生测模式退出后需要等待10min左右查看对应状态是否恢复。退出生测模式方法如下Ctrlc进入底层 BootLoader Menu(“CtrlZ” to upper level) TOP menu items.0. Tftp utilities.XModem utilities.Run main.SetMac utilities.Scattered utilities. //间接设置 4Set Module SerialPress a key to run the command: 4 BootLoader Menu(“CtrlZ” to upper level) Scattered utilities.Show the bootloader version.Reload system.Set baudrate.Advanced settings. //高级选项设置Press a key to run the command: 3 BootLoader Menu(“CtrlZ” to upper level) Advanced settings.Set Fast boot.Set Support Shell.Open/Close debug switch.Format flash filesystem.Set default environment.Set RGOS mode. //切换系统模式 5Press a key to run the command: 5Switch RGOS to factory mode.Erasing Nand…Erasing at 0x4e0000 – 100% complete.Writing to Nand… #done然后按几下CtrlZ返回上一层进行重启设备 BootLoader Menu(“CtrlZ” to upper level) Advanced settings.Set Fast boot.Set Support Shell.Open/Close debug switch.Format flash filesystem.Set default environment.Set RGOS mode.Press a key to run the command: BootLoader Menu(“CtrlZ” to upper level) Scattered utilities.Show the bootloader version.Reload system.Set baudrate.Advanced settings.Press a key to run the command: BootLoader Menu(“CtrlZ” to upper level) TOP menu items.Tftp utilities.XModem utilities.Run main. //进行设备重启SetMac utilities.Scattered utilities.Set Module SerialPress a key to run the command: 2 //进行设备重启五、故障信息收集terminal length 0show clockshow versionshow version detailshow version slotshow runshow logshow inter statusshow interface counters errorsshow interface status | inc upshow interface link-state-change statisticsshow interface transceivershow interface transceiver alarmshow interface transceiver diagnosisshow interface以下为底层接口信息收集10.Xsdsu xx //机框设备切换到对应线卡盒式设备无需执行此行ddev //查看接口对应关系ps // 连续3次show c // 连续3次phy infophy all11.X:run-system-shelllc x //机框设备切换到对应线卡盒式设备无需执行此行debug-ssaps // 连续3次show c // 连续3次sdssaport ddev //查看接口对应关系phy infophy all11.X 关shellexecute diagnose-cmd hardware meexecute diagnose-cmd hardware more /etc/versionexecute diagnose-cmd hardware dir /var/tmp/coredump/ // 如果cordump目录下有文件将文件拷贝出来execute diagnose-cmd hardware dmesgexecute diagnose-cmd hardware more /tmp/proxy/defout/ssa_processexecute diagnose-cmd hardware more /tmp/proxy/defout/ssc_processexecute diagnose-cmd hardware more /tmp/proxy/defout/ssd_processexecute diagnose-cmd hardware ssa aexecute diagnose-cmd hardware ssa psexecute diagnose-cmd hardware ssa phy infoexecute diagnose-cmd hardware ssa phy allexecute diagnose-cmd hardware port allexecute diagnose-cmd hardware ssa show c //执行5次间隔2秒execute diagnose-cmd hardware ssa show int //执行3次间隔2秒execute diagnose-cmd hardware ssa getreg CMIC_LEDUP0_DATA_RAMexecute diagnose-cmd hardware sd ssaportexecute diagnose-cmd hardware sd ssaport ddev12.X:run-system-shelllc x //机框设备切换到对应线卡盒式设备无需执行此行debug-ssaps // 连续3次show c // 连续3次show PortMAP //查看接口对应关系ptd portmapm0 status //查看M0芯片状态phy infophy all12.X 关shell:收集一键信息terminal no length六、总结与建议端口不亮问题可通过替换测试先初步明确是否端口异常若是S7910E以及S78C产品需要重点确认是否M0挂死问题