网络设备与专线应急演练报告¶
演练简介¶
一、演练时间¶
20XX年X月X日
二、演练目的¶
为防止网络设备意外故障导致业务中断带来的影响
三、演练过程¶
1、模拟联通主线出现故障,观察是否出现生产故障,是否有告警以及主防火墙是否切至备墙,是否切换至电信备线。
2、模拟主防火墙故障,下行(上行)故障,观察是否出现生产故障,是否有告警以及主防火墙是否切至备墙。以及防火墙单心跳线故障,(当前心跳口只有一个,需要增加一个心跳口不能设置同一网段),是否有告警,是否出现生产故障,备用心跳口是否启用。
3、模拟主核心故障,下行(上行)故障,观察是否出现生产故障,观察路由路径是否发生变化(可能)。以及模拟核心堆叠线发生故障,观察是否出现生产故障,主备核心交换机是否切换主从。
4、模拟主汇聚故障,下行(上行)故障,观察是否出现生产故障,观察路由路径是否发生变化(可能)。以及模拟汇聚堆叠线发生故障(单条),观察是否出现生产故障,主备核心交换机是否切换主从。
5、主汇聚恢复,观察恢复过程以及恢复后是否出现生产故障,主备汇聚交换机是否切换主从。以及汇聚堆叠口恢复,观察恢复过程是否出现生产故障,主备汇聚交换机是否切换主从。
6、主核心恢复,观察恢复过程以及恢复后是否出现生产故障,主备核心交换机是否切换主从。以及主核心堆叠口恢复,观察恢复过程是否出现生产故障,主备核心交换机是否切换主从。
7、主防火墙恢复,观察恢复过程是否出现生产故障,是否有告警以及防火墙主备是否切换。防火墙心跳口恢复,观察恢复过程是否出现生产故障,心跳接口是否切换。
8、运营商恢复,观察恢复过程是否出现生产故障,是否有告警以及防火墙主备是否切换。
四、演练结果¶
经网络稳定性测试后,确定XX与YY的互联链路或XX端的防火墙-核心-汇聚这些重要设备出现单台设备故障时,对生产无影响。
一、未演练前各楼层业务网络情况¶
(一)1楼演练开始前网络状态¶
业务系统、办公平台均可正常访问

以及甲方提供的 hosts 所有地址的连通性如下

二、模拟联通主线故障¶
(一)主线故障模拟方式¶
将光端机的光纤线拔掉,以此作为运营商主线发生故障情况。
光纤原先位置

光纤拔掉之后

(二)1楼遇到联通主线故障的网络情况¶
业务系统、办公平台均可正常访问

以及甲方提供的 hosts 所有地址的连通性如下

三、模拟主防火墙故障¶
(一)模拟主防火墙故障方式¶
进入主核心交换机,通过关闭主核心到防火墙的上行聚合口,以此模拟主防火墙故障效果。以及如图主核心的上下联相关设备信息。

(二)1楼遇到的主防火墙故障的网络情况¶
业务系统、办公平台均可正常访问

(三)进一步模拟防火墙单根心跳线故障¶
一、模拟方式¶
防火墙网络菜单栏接口处关闭心跳接口GE0/0/6。

如下系统日志,GE0/0/6跳转GE0/0/7。

以1楼业务网络情况为例¶
业务系统、办公平台均可正常访问

以及甲方提供的 hosts 所有地址的连通性如下

四、模拟主核心故障¶
(一)模拟主核心故障方式¶
关闭 xg0/1/1、xg0/½、xg0/0/3、xg/0/0/4、g0/0/23、g0/0/24 端口。

(二)21楼遇到主核心故障的网络情况¶
业务系统、办公平台均可正常访问

以及甲方提供的 hosts 所有地址的连通性如下

(三)进一步模拟主核心堆叠线故障¶
一、模拟方式¶
关闭 xg0/0/2 口,如图所示

以1楼业务网络情况为例¶
业务系统、办公平台均可正常访问

以及甲方提供的 hosts 所有地址的连通性如下

五、模拟汇聚交换机故障¶
(一)模拟汇聚交换机故障方式¶
关闭1楼内网汇聚g0/0/1-g0/0/6,以及g0/0/24端口。

(二)1楼遇到汇聚交换机故障的网络情况¶
业务系统、办公平台均可正常访问

以及甲方提供的 hosts 所有地址的连通性如下

六、恢复各楼层汇聚交换机¶
(一)当前网络故障情况说明¶
在主线、主防火墙、主核心、各楼层汇聚交换机均出现故障的情况下,业务网络依旧稳定,实现了业务连续性的无缝运行。以下所有章节围绕恢复工作展开。
(二)各楼层汇聚交换机恢复工作¶
20楼内网汇聚关闭状态下的g0/0/1-g0/0/6,以及g0/0/24端口进行启用。

(三)1楼遇到汇聚交换机故障的网络情况¶
业务系统、办公平台均可正常访问

以及甲方提供的 hosts 所有地址的连通性如下

七、恢复主核心交换机¶
(一)主核心的恢复工作¶
启用 xg0/1/1、xg0/½、xg0/0/3、xg/0/0/4、g0/0/23、g0/0/24 端口。以下是主核心收到上下联的信息。

恢复主核心堆叠,启用xg0/0/2口。

(二)1楼在主核心恢复的网络情况¶
业务系统、办公平台均可正常访问

以及甲方提供的 hosts 所有地址的连通性如下

八、恢复主防火墙¶
(一)恢复主防火墙工作¶
进入主核心交换机,通过开启主核心到防火墙的上行聚合口,以此达到连通主防火墙的目的。

以及当前防火墙状态

(二)1楼在主防火墙恢复的网络情况¶
业务系统、办公平台均可正常访问

以及甲方提供的 hosts 所有地址的连通性如下

九、恢复运营商专线¶
(一)恢复联通专线工作¶
1、将光端机的光纤线接入。

2、主备防火墙进行专线测试。

(二)当前网络设备恢复情况说明¶
各楼层汇聚、主核心、主防火墙,以及运营商专线设备均已恢复。
(三)所有恢复工作完毕,并对各个楼层业务网络验证¶
稳定性测试完成,恢复所有设备进行手动中断的接口,再次进行恢复后验证业务截图:
十、总结¶
经网络稳定性测试后,确定XX与YY的互联链路或XX端的防火墙-核心-汇聚这些重要设备出现单台设备故障时,对生产无影响,如果同时出现两台设备故障,可参考《网络故障应急方案》进行处理。