Skip to content

网络设备与专线应急演练报告

演练简介

一、演练时间

20XX年X月X日

二、演练目的

为防止网络设备意外故障导致业务中断带来的影响

三、演练过程

1、模拟联通主线出现故障,观察是否出现生产故障,是否有告警以及主防火墙是否切至备墙,是否切换至电信备线。

2、模拟主防火墙故障,下行(上行)故障,观察是否出现生产故障,是否有告警以及主防火墙是否切至备墙。以及防火墙单心跳线故障,(当前心跳口只有一个,需要增加一个心跳口不能设置同一网段),是否有告警,是否出现生产故障,备用心跳口是否启用。

3、模拟主核心故障,下行(上行)故障,观察是否出现生产故障,观察路由路径是否发生变化(可能)。以及模拟核心堆叠线发生故障,观察是否出现生产故障,主备核心交换机是否切换主从。

4、模拟主汇聚故障,下行(上行)故障,观察是否出现生产故障,观察路由路径是否发生变化(可能)。以及模拟汇聚堆叠线发生故障(单条),观察是否出现生产故障,主备核心交换机是否切换主从。

5、主汇聚恢复,观察恢复过程以及恢复后是否出现生产故障,主备汇聚交换机是否切换主从。以及汇聚堆叠口恢复,观察恢复过程是否出现生产故障,主备汇聚交换机是否切换主从。

6、主核心恢复,观察恢复过程以及恢复后是否出现生产故障,主备核心交换机是否切换主从。以及主核心堆叠口恢复,观察恢复过程是否出现生产故障,主备核心交换机是否切换主从。

7、主防火墙恢复,观察恢复过程是否出现生产故障,是否有告警以及防火墙主备是否切换。防火墙心跳口恢复,观察恢复过程是否出现生产故障,心跳接口是否切换。

8、运营商恢复,观察恢复过程是否出现生产故障,是否有告警以及防火墙主备是否切换。

四、演练结果

经网络稳定性测试后,确定XX与YY的互联链路或XX端的防火墙-核心-汇聚这些重要设备出现单台设备故障时,对生产无影响。

一、未演练前各楼层业务网络情况

(一)1楼演练开始前网络状态

业务系统、办公平台均可正常访问

![](贴图.jpg)

以及甲方提供的 hosts 所有地址的连通性如下

![](贴图.jpg)

二、模拟联通主线故障

(一)主线故障模拟方式

将光端机的光纤线拔掉,以此作为运营商主线发生故障情况。

光纤原先位置

![](贴图.jpg)

光纤拔掉之后

![](贴图.jpg)

(二)1楼遇到联通主线故障的网络情况

业务系统、办公平台均可正常访问

![](贴图.jpg)

以及甲方提供的 hosts 所有地址的连通性如下

![](贴图.jpg)

三、模拟主防火墙故障

(一)模拟主防火墙故障方式

进入主核心交换机,通过关闭主核心到防火墙的上行聚合口,以此模拟主防火墙故障效果。以及如图主核心的上下联相关设备信息。

![](贴图.jpg)

(二)1楼遇到的主防火墙故障的网络情况

业务系统、办公平台均可正常访问

![](贴图.jpg)

(三)进一步模拟防火墙单根心跳线故障

一、模拟方式

防火墙网络菜单栏接口处关闭心跳接口GE0/0/6。

![](网络 -> 接口.PNG)

如下系统日志,GE0/0/6跳转GE0/0/7。

![](系统日志.png)

以1楼业务网络情况为例

业务系统、办公平台均可正常访问

![](贴图.jpg)

以及甲方提供的 hosts 所有地址的连通性如下

![](贴图.jpg)

四、模拟主核心故障

(一)模拟主核心故障方式

关闭 xg0/1/1、xg0/½、xg0/0/3、xg/0/0/4、g0/0/23、g0/0/24 端口。

![](贴图.jpg)

(二)21楼遇到主核心故障的网络情况

业务系统、办公平台均可正常访问

![](贴图.jpg)

以及甲方提供的 hosts 所有地址的连通性如下

![](贴图.jpg)

(三)进一步模拟主核心堆叠线故障

一、模拟方式

关闭 xg0/0/2 口,如图所示

![](贴图.jpg)

以1楼业务网络情况为例

业务系统、办公平台均可正常访问

![](贴图.jpg)

以及甲方提供的 hosts 所有地址的连通性如下

![](贴图.jpg)

五、模拟汇聚交换机故障

(一)模拟汇聚交换机故障方式

关闭1楼内网汇聚g0/0/1-g0/0/6,以及g0/0/24端口。

![](贴图.jpg)

(二)1楼遇到汇聚交换机故障的网络情况

业务系统、办公平台均可正常访问

![](贴图.jpg)

以及甲方提供的 hosts 所有地址的连通性如下

![](贴图.jpg)

六、恢复各楼层汇聚交换机

(一)当前网络故障情况说明

在主线、主防火墙、主核心、各楼层汇聚交换机均出现故障的情况下,业务网络依旧稳定,实现了业务连续性的无缝运行。以下所有章节围绕恢复工作展开。

(二)各楼层汇聚交换机恢复工作

20楼内网汇聚关闭状态下的g0/0/1-g0/0/6,以及g0/0/24端口进行启用。

![](贴图.jpg)

(三)1楼遇到汇聚交换机故障的网络情况

业务系统、办公平台均可正常访问

![](贴图.jpg)

以及甲方提供的 hosts 所有地址的连通性如下

![](贴图.jpg)

七、恢复主核心交换机

(一)主核心的恢复工作

启用 xg0/1/1、xg0/½、xg0/0/3、xg/0/0/4、g0/0/23、g0/0/24 端口。以下是主核心收到上下联的信息。

![](贴图.jpg)

恢复主核心堆叠,启用xg0/0/2口。

![](贴图.jpg)

(二)1楼在主核心恢复的网络情况

业务系统、办公平台均可正常访问

![](贴图.jpg)

以及甲方提供的 hosts 所有地址的连通性如下

![](贴图.jpg)

八、恢复主防火墙

(一)恢复主防火墙工作

进入主核心交换机,通过开启主核心到防火墙的上行聚合口,以此达到连通主防火墙的目的。

![](贴图.jpg)

以及当前防火墙状态

![](系统->高可靠性->双击热备.jpg)

(二)1楼在主防火墙恢复的网络情况

业务系统、办公平台均可正常访问

![](贴图.jpg)

以及甲方提供的 hosts 所有地址的连通性如下

![](贴图.jpg)

九、恢复运营商专线

(一)恢复联通专线工作

1、将光端机的光纤线接入。

![](贴图.jpg)

2、主备防火墙进行专线测试。

![](贴图.jpg)

(二)当前网络设备恢复情况说明

各楼层汇聚、主核心、主防火墙,以及运营商专线设备均已恢复。

(三)所有恢复工作完毕,并对各个楼层业务网络验证

稳定性测试完成,恢复所有设备进行手动中断的接口,再次进行恢复后验证业务截图:

十、总结

经网络稳定性测试后,确定XX与YY的互联链路或XX端的防火墙-核心-汇聚这些重要设备出现单台设备故障时,对生产无影响,如果同时出现两台设备故障,可参考《网络故障应急方案》进行处理。