思科7600系列设备VTT故障排查流程

qddf

在最近故障处理过程中出现过一次关于思科设备所有板卡一直加载不成功的问题。
主要是一下故障现象
1：思科设备在加电后主备电源显示红灯
2：设备板卡可以看到状态灯在加载过程
3：设备板卡加载过后，直接板卡全部自动重启，无法进入命令模式。也无法远程登录所有板卡业务基本没用，此类现象断电后重启依然重复
故障处理流程和注意事项：
1：首先出现类似故障，所有板卡加载不成功，并且反复自动重启，单板故障和电源模块故障问题基本排除，因为如果引擎故障，主备引擎同时出现问题概率太低，其次可以通过插板引擎切换排除。
2：电源模块有故障，基本不会出现板卡加载的过程，如果有时间的话，可以把所有板卡都拔处，单引擎加载看是否能加载成功。
3：因为有引擎板卡加载过程的状态，通过串口线来查看加载过程告警。
观察启动过程中所有板卡加载成功后有一个启动项有关于VTT的提示
Dec  9 2016 13:14:46.624 BJ: %FABRIC-SP-5-CLEAR_BLOCK: Clear block option is off for the fabric in slot 5.
Dec  9 2016 13:14:46.708 BJ: %FABRIC-SP-5-FABRIC_MODULE_ACTIVE: The Switch Fabric Module in slot 5 became active.
Dec  9 2016 13:14:48.268 BJ: %DIAG-SP-6-RUN_MINIMUM: Module 5: Running Minimal Diagnostics...
Dec  9 2016 13:14:53.000 BJ: %DIAG-SP-6-DIAG_OK: Module 5: Passed Online Diagnostics
Dec  9 2016 13:14:53.344 BJ: %OIR-SP-6-INSCARD: Card inserted in slot 5, interfaces are now online
Dec  9 2016 13:15:05.848 BJ: %PFREDUN-SP-6-ACTIVE: Standby initializing for SSO mode
Dec  9 2016 13:15:08.252 BJ: %SYS-SP-3-LOGGER_FLUSHED: System was paused for 00:00:00 to ensure console debugging output.
Dec  9 2016 13:15:11.364 BJ: %C7600_ENV-SP-0-VTTMAJFAILED: Too many VTT failures to continue system operation
Dec  9 2016 13:15:11.364 BJ: %C7600_ENV-SP-2-SHUTDOWN_SCHEDULED: shutdown for backplane scheduled in 10 seconds
Dec  9 2016 13:15:11.384 BJ: %C7600_ENV-SP-4-VTTFAILED: VTT 1 failed
Dec  9 2016 13:15:12.904 BJ: %C7600_ENV-SP-4-VTTFAILED: VTT 2 failed

从此告警信息可以到VTT1  VTT2 两个模块 启动失败，设备会在10秒内自动关闭。
因此VTT出问题的时候，在加电后板卡引擎都会启动，但是加载到VTT 的时候就会如此反复重启。
还有一个情况，就是如果你整个机框所有板卡拔出，单独插一个新的引擎的时候由于加载速度比较快，有可能会进入配置命令行，但是过会依然如此。
如果出现类似情况大家就只能更换VTT模块、VTT模块其实官方的解释简单来说就是机框电源稳压器。

更换VTT模块的位置在7600系列交换机背后电路板上，7600背板上面一共插了有3个VTT模块，分别有数字标明是1 2 3 。
更换模块之后进入系统也可以用sh env all 命令查看，具体详细的内容可以百度搜索的大家就百度搜索。