艾玛，全网故障？！我只是插了一根网线！

作者简介

赵舜东，江湖人称赵班长，曾负责武警某部指挥自动化架构和运维工作，2008年退役后一直从事互联网运维工作。UnixHot运维社区创始人、《SaltStack入门与实践》作者。

引言

“没有经历过故障的运维生涯是不***的”—路人甲

在我们日常运维工作中，会遭遇各种各样，甚至乱七八糟的故障。而且有些故障刚开始会让你莫名其妙，但结果却让人苦笑不得。

这次分享，我想通过阐述个人运维生涯中的其中两个故障作为引子，进而聊聊发生故障之前和之后，我们应该怎么办。

案例1：我只是插了一根网线，全网中断!?

1.环境描述

某年某月某日，机房上架新的服务器。我们的架构是服务器上联两台接入层交换，做端口 Bonding 。

每两个机柜都会有接入层交换机，所有接入层交换，双链路上联到汇聚层交换中。然后汇聚层交换运行MSTP HSRP协议。

架构图如下：我们的操作是要新增一个接入层交换，用来扩展网络规模。