这两年做企业网络架构,绕不开一个词:数智化。传统企业业务正在被数字化和智能化重构,产线系统、供应链调度、客服质检、风控决策全部搬到了线上,数据一中断,业务就是真金白银的损失。我自己的感受很直接:数智化程度越高的企业,底层网络容灾的压力就越大,网络一断,数据库同步停摆、应用链路全断、AI推理服务卡住,损失是按分钟计的。在“十五五”数智化建设的大方向下,容灾运维已经从“可选项目”变成了“必答题”,而网络容灾恰恰是整条容灾链路里最容易被低估、也最需要落地深挖的一环。
这篇文章基于我自己在多个企业级网络容灾项目里的落地经验,聊聊容灾目标怎么定、网络层面有哪些关键手段、技术选型要怎么取舍、容灾演练和排错怎么搞。适合正在主导或参与容灾建设的运维工程师、网络架构师和技术负责人参考,有基础可以直接按章节拿去当方案骨架,刚入门的也能从中理解每步操作背后的原因。
1. 数智化背景下的容灾需求变化,先看清“敌人”变成了什么样
1.1 业务形态变了,网络中断的影响半径也变了
早些年给企业做容灾,思路相对简单:机房自建、服务器数量有限,核心业务基本是单体系统,容灾重点放在数据库备份、磁盘阵列镜像和定时离线拷贝上。现在完全不是这么回事。微服务拆分、容器化部署、大数据平台、机器学习推理服务全面铺开,业务节点动辄几十上百个,节点之间靠网络强耦合。
举个我实际接触过的案例。某制造企业上线了智能排产系统后,工厂车间执行端要实时拉取计划数据,供应商协同要实时同步物料状态。系统上线之前,企业觉得有数据库备份就够了;系统上线之后遭遇一次核心交换机故障,网络中断十五分钟,产线直接停摆,连带仓库发货、客户对账全部受阻。事后复盘,真正导致业务不可用的不是数据库数据丢了多少,而是网络断了之后所有彼此依赖的服务全部失联。这个案例非常典型:数智化业务的数据价值密度变高了,网络就成了“水电气”一样的基础设施,中断一次,影响半径远远超过传统IT时代。
1.2 容灾目标从“数据不丢”升级为“业务不停”
以前定容灾指标,很多企业首选RPO(恢复点目标),只要数据少丢、最好零丢失就算达标,RTO(恢复时间目标)可以放宽到4小时甚至更长。但数智化场景下,这个标准根本扛不住。AI推理服务、实时风控、在线协同这些业务,对连续性要求极高,恢复时间往往要求分钟级甚至秒级。
这里有个很现实的技术联动问题:网络层面的恢复速度决定了上层数据复制和应用切换的速度。存储复制、数据库同步、消息队列镜像,全都依赖稳固的网络链路。如果底层网络没有做冗余设计或切换太慢,上层方案再先进,RTO也只能被网络拖住。所以做容灾设计时,我会建议把网络容灾放到和数据库容灾同等重要的位置,甚至要更靠前——网络是承载一切的基础,网络先断,数据复制必然跟着断。
1.3 网络容灾的定义边界,比“网络设备冗余”大得多
不少团队一提网络容灾,第一反应就是“多买一台交换机、多拉一条线、搞设备堆叠”。这些是基础,但远远不够。完整的网络容灾,应该覆盖物理链路、路由协议、DNS解析、全局负载调度、数据中心互联、云上网络以及应用接入层的一条完整链路。
我在项目里最常见的翻车场景,是业务团队只做了应用高可用,网络团队只做了设备冗余,两边各自为政。业务应用自身有集群切换能力,可一旦网络故障导致IP不通、DNS解析不动、防火墙策略不联动,应用的切换机制完全触发不了。所以跨团队协作梳理“端到端网络路径”非常关键:一条业务请求从用户端到云端再到数据中心,中间经过哪些网络节点、哪些DNS解析、哪些负载均衡设备,所有单点都必须列入容灾范围。
2. 动手前的顶层设计:容灾指标、架构形态和网络范围
2.1 RPO/RTO目标定成多少,不是拍脑袋拍的
容灾指标定得太严,成本会呈指数级上升;定得太松,业务侧又不答应。我建议用“中断损失估算”来反推。方法其实不复杂:统计一款核心业务过去一年的平均每小时流水,加上停机期间的人力成本、客户流失估算、监管或合同层面的罚则,得出一个“每小时损失金额”。然后对比不同容灾方案的增量和应急成本,取一个平衡点。
举个例子,某零售电商团队估算促销期间业务中断一小时的损失在几十万到上百万之间,品牌影响另算,最终把核心交易域RTO定在五分钟以内,RPO接近零。另一家制造企业内部管理系统虽重要但允许半小时中断,RTO就定为三十分钟。网络侧能支撑的目标,一般是这样对应:单设备故障自动切换可以在1~3分钟完成,同城双活的无感切换可以在分钟级甚至秒级完成,异地灾备要在15~30分钟拉起业务则对网络链路有效性和应用恢复速度有更高要求。
2.2 常见容灾架构形态怎么选
容灾架构不是越高级越好,关键看业务形态和预算。我把主流形态整理成了一张表,方便对照:
| 架构形态 | 典型RPO/RTO | 成本量级 | 适用场景 |
|---|---|---|---|
| 本地高可用(设备/链路冗余) | RPO≈0,RTO分钟级 | 低 | 单机房业务,允许业务短暂抖动 |
| 同城双活 | RPO≈0,RTO秒级/分钟级 | 中高 | 核心交易、实时在线业务,要求无感切换 |
| 异地灾备 | RPO分钟级~小时级,RTO半小时级 | 中 | 监管要求、全局灾难场景兜底 |
| 混合云容灾 | 取决于数据复制和网络切换,通常RTO分钟级 | 中高 | 已有云上业务,需要快速弹性扩容容灾 |
我做选型时有个习惯:先看业务能不能接受“同城机房整体不可用”的风险。如果业务完全不能接受,就得上同城双活或混合云容灾;如果只是防硬件故障和线路故障,那本地高可用加异地定时备份就基本够用。很多企业一上来就要做同城双活,结果业务系统根本没做分布式改造,双活变成“单活+备用”,白白增加复杂度,这种坑我见过不止一次。
2.3 网络容灾的范围要画清楚,否则演练一定出问题
范围不清晰是容灾项目里最常见的隐患。我建议在顶层设计阶段就输出一张“网络路径清单”,把以下内容逐项列出来:用户访问入口(DNS、CDN、全局负载均衡)、公网/专线接入、接入交换机、核心交换机、防火墙、负载均衡器、跨数据中心链路、云上VPC出口。每一项都要明确主用和备用方案,以及故障时的切换责任人。
这个清单在设计阶段看起来枯燥,但它是后续做演练、做自动化切换、做故障复盘的地基。没有这份清单,演练时会出现一个很尴尬的局面:业务系统自己恢复了,网络侧却没人知道要从哪一步开始切;或者网络侧切换完了,业务侧压根没收到通知。两个团队各干各的,RTO根本不可控。
3. 网络容灾的关键技术手段,一层一层拆开讲
3.1 物理链路和设备层的冗余,先把地基夯牢
物理链路冗余要注意的不只是“多拉一条线”,还要考虑链路物理路径和运营商的独立性。我踩过一个很典型的坑:某企业同时租了两条互联网专线,以为已经做了链路冗余,结果两条线从同一个运营商局端出来走同一个物理管井。市政施工把管井挖断,两条线路一起中断,业务瞬间全挂。后来才改成“不同运营商、不同局端、物理路径分开”的布法。这种基础问题不出事则已,出事就是大事故。
设备层的冗余有两种主流做法:堆叠/集群和独立双机。我的建议是:核心层优先考虑独立双机加动态路由,接入层可以根据情况使用堆叠简化管理。
- 堆叠的好处是管理简单、配置量小,坏处是把两台物理设备绑成了一个逻辑设备,升级、重启、异常场景下可能互相影响。
- 独立双机配合VRRP或BGP多归属,配置复杂度上去了,但故障隔离性更清晰,更符合核心设备的高可用预期。
链路检测参数也直接影响切换速度。很多人只配置了静态路由,没有联动快速检测机制,链路断了只能等路由超时,最坏情况要等几十秒甚至几分钟。这个时间窗口在数智化业务里无法接受。建议在关键链路上启用BFD(双向转发检测),配合静态路由或BGP联动。以常见设备配置为例,可以这样理解参数逻辑:
bfd interface wan-link-1 bfd interval 100 min-rx 100 multiplier 3 ip route 0.0.0.0/0 wan-link-1 track bfd-session-link1这里的含义是:BFD每100毫秒发一次探测报文,连续3次没有收到对端响应就判定链路故障,联动路由在200~300毫秒内感知并切换。当然,间隔越短越灵敏,代价是误判率可能升高。普通链路建议用300~500毫秒,核心高价值链路才用100毫秒级别。
3.2 路由层面的容灾,别把所有希望押在静态路由上
网络容灾必须要有“路由大脑”,也就是让设备自己知道怎么选路、怎么切换。动态路由协议是主流。BGP可以实现多链路多归属,通过AS Path、本地优先级等属性控制主备还是负载分担;OSPF/IS-IS适合数据中心内部的东西向流量,收敛快、扩展性好。
我自己偏好的一个组合是:数据中心内部用OSPF或IS-IS实现设备级冗余,数据中心出口用BGP对接多运营商或多专线。BGP的优势在于控制力强,可以把不同链路设置成不同的优先级,并且快速感知邻居状态变化。配合BFD,BGP路由收敛可以做到亚秒级。
再补充一个细节:不少网络团队会写一堆静态路由加脚本探测的“自制方案”,我不太推荐。脚本探活的局限性在于,它只能探测到某一个目标IP,一旦对端设备本身宕机或网络策略变化,脚本逻辑很容易误判。动态路由协议加BFD已经是成熟可靠的做法,没必要自己造轮子。
3.3 DNS与全局负载均衡,决定用户侧能看到多少“容灾效果”
很多企业做完网络设备级高可用,觉得万事大吉,但真到故障时,用户端还是大量报错。问题往往出在DNS和全局流量的调度上。这里分两个层面讲。
一个是DNS本身的冗余。企业自建DNS服务器至少要跑主备,通过动态DNS协议做区域传送。一旦主DNS挂了,备用DNS要能立刻对外解析。
另一个是全局负载均衡(GSLB)。GSLB可以根据多个数据中心或云的实时健康状态,把用户流量导向可用节点。这里有个关键参数:DNS解析记录TTL。很多运维团队把TTL设成几小时甚至24小时,平时没问题,故障切换时这就是灾难——用户端DNS缓存不失效,流量还是会打到故障节点。我们后来把核心域名的TTL统一降到了60秒左右,同时推动业务客户端和中间层合理处理DNS缓存,才把切换生效时间从“小时级”压到“分钟级”。
还有一点容易被忽略:即使GSLB已经切了新IP,数据库连接池、长连接、HTTP Keep-Alive这些应用层的“顽固连接”依然握着旧地址。所以在设计DNS切换时,要同步考虑应用侧是否需要排空连接、重启连接池,否则看起来解析已经变了,实际线上流量还是旧连接在扛。
3.4 数据中心互联和云上网络,容灾最容易在这里翻车
跨数据中心容灾离不开DCI(数据中心互联)。传统做法是波分设备或裸光纤直连,后来VXLAN、EVPN等大二层技术流行起来。但在实战中,我见到的多数翻车现场都源于过度依赖大二层。
大二层让虚拟机跨机房迁移变得非常方便,但也会带来ARP表膨胀、广播风暴、环路风险。一旦两台数据中心之间出现链路震荡,STP/RSTP收敛过程中业务就会有明显抖动。我的建议是:如果没有特别强的跨机房虚拟机迁移需求,优先做三层互联,用动态路由打通;所谓“双活”,不必执着于二层大广播域。把应用改造成“多活实例+数据库跨机房同步”,比在网络上强撑一个大二层更稳。
云上网络这块,现在很多企业走混合云容灾,云上VPC和自建机房之间通常有专线连接,也可能配合其他加密通道。这里面有三件事必须提前规划好:
- 网段规划。生产中心和云上灾备中心的VPC网段不能冲突,否则将来互联和路由发布会非常痛苦。
- 路由发布与收敛。IDC到云、云到IDC的路由要双向可控,建议通过边界网关或专线接入点统一管理。
- 安全策略联动。防火墙、安全组、ACL要跟着容灾切换一起联动。否则会发生这样一种让人抓狂的情况:数据面链路全通,但安全策略没放行新网段,流量到门口就是进不来。
3.5 应用流量调度层,健康检查是灵魂
负载均衡设备是应用流量的总闸。四层负载均衡关注IP和端口,七层负载均衡可以做到URL、Cookie级别的精细化调度。容灾设计中,负载均衡的健康检查策略尤其重要。
我建议健康检查不要只检测“端口通不通”,而是要检测“业务是否真的可用”。一个简单做法是配置一条只读的业务健康探测URL,让负载均衡定期去请求业务系统暴露的特定接口,比如一个返回轻量JSON的/healthz地址。接口正常就是存活,接口超时或返回非200就立即摘除节点。这里有个细节:健康检查的超时时间和重试次数要结合业务本身的情况来设,设得太短容易产生误摘,设得太长又失去意义。一般建议探测间隔5秒、超时2~3秒、连续失败2~3次后摘除。
再补充一个长连接场景的经验:很多数智化业务依赖消息推送、实时协作、长连接网关。这类连接数量大、存活时间长,如果负载均衡直接强制断连,大量客户端会同时重连,瞬间冲垮后端服务,这就是典型的“切换后雪崩”。解决办法是给负载均衡配置优雅排空,先摘流量、等存量连接自然耗尽到低水位,再对剩余连接做阈值控制,整个过程是“慢慢切”,不是“一键全断”。
4. 技术选型实操:我从项目中总结的选择逻辑和踩坑记录
4.1 自建网络设备,还是直接把网络交给云厂商
网络容灾技术选型逃不开自建和云托管的选择。成熟企业多数是混合形态:自建机房核心网络设备自持,云上部分用云厂商提供的网络产品。
自建的好处是可控性高,设备选型灵活,适合对性能和排查深度有要求的场景。坏处是设备生命周期管理、版本升级、安全加固都成体系,需要专门的人力。云上的好处是开箱即用,控制台点点就能完成VPC、负载均衡、专线的组合,弹性扩容极快。坏处是当出现网络问题想深挖时,云上能见度相对有限,可调参数也不如自建设备丰富。
我自己在项目里通常这样分工:IDC核心网络采用成熟网络设备,运维团队保持对硬件的掌控力;云上网络尽量使用云原生网络能力,包括云负载均衡、云专线、云解析,减少自建复杂度。开源方案比如HAProxy、Keepalived、Prometheus生态则用于边缘接入和监控场景,成本友好,社区资源丰富,适合团队有较强自研能力的场景。
4.2 全自动切换、半自动切换还是手动切换?我建议分级管理
很多技术负责人都会问一个问题:“网络容灾切换,要不要做成全自动?”我的回答是:看切什么。
单设备故障、链路故障这类确定性强的问题,可以全自动,比如BFD触发路由切换、冗余设备自动接管。但跨数据中心的整体切换、DNS切换、负载均衡摘流,我强烈建议做成“半自动”,也就是编排平台一键触发、人工确认后执行。原因很简单:自动化的收益是快,风险是“误判+脑裂”。
真实发生过一个案例:某团队配置了一套全自动切换系统,结果一条链路的探针出现误报,系统自动把全部流量切去了备机房,备机房根本不具备承接所有业务的能力,服务大面积降级。为什么会产生这种误判?因为探针只测了一条路径的可达性,没有做跨节点、跨路径的交叉验证。自那以后我给自己立了条规矩:跨级切换至少需要两个独立探针同时确认故障才允许自动执行,否则一律走人工确认。
分级切换策略可以参考这个思路:
- 第一级:设备故障、链路故障,动态路由自动收敛,不需要人工介入。
- 第二级:整个数据中心出口不可用,GSLB自动把用户流量切到备用中心。
- 第三级:跨城市容灾整体切换,需要结合数据库复制状态、应用启动状态、安全策略变更,采用“一键编排+人工确认闸口”。
4.3 监控告警体系:先能看见故障,才能谈容灾
没有监控的容灾就是盲跑。网络层最基本的监控必须包含三块:设备与链路状态、真实业务拨测、网络质量指标。
设备与链路状态是基础,CPU、内存、端口流量、光功率、错包、CRC错误,都要纳入采集。WAN链路更要关注时延、抖动、丢包率,因为很多链路故障并不是完全“断了”,而是质量劣化到业务不可接受的程度,这时路由表还没变化,业务已经卡死。我建议在网络质量劣化触发阈值时就提前告警,不要等完全中断。
真实业务拨测高度推荐。花钱买分布在不同城市的云主机或探针,定期访问核心业务域名和IP,模拟真实用户视角。很多网络故障是地域性的、运营商之间的互通问题,机房内部看得见全绿,用户侧早就访问不了。拨测能在问题扩散前发现“局部不可达”“跨网劣化”这类隐患。
告警去重也要提前设计好。链路抖动时,底层探针、业务拨测、应用监控可能同时产生几十条告警,运维人员会在告警风暴里迷失焦点。我的经验是把告警按“故障域”归并:网络设备故障产生的告警统一归并为核心洞,拨测失败类告警按业务域名聚合,避免同一根因的告警多头轰炸。
4.4 可观测性建设:容灾切换不能靠“感觉”来验证
数智化业务的容灾验证,越来越离不开可观测性。传统的“ping通、端口通”只能说明网络层可达,不能证明业务可用。我建议围绕指标、日志、链路追踪三支柱做建设。
指标层面,要建立SLO的监控视图,比如核心链路的可用性、跨数据中心同步延迟、业务拨测成功率。日志层面,网络设备的syslog、负载均衡的访问日志、防火墙的会话日志要统一采集并关联时间戳。链路追踪层面,通过分布式追踪系统把一次业务请求的完整路径串联起来,从用户入口到网关到微服务到数据库,每一步落在哪个节点、经过哪条链路都能看得到。
这套体系在做容灾切换验证时价值巨大。有一次我们做同城双活切换演练,网络、应用检查全部通过,但通过链路追踪发现一部分请求被动到了旧节点并出现跨可用区调用。数据面看似通了,实际上应用侧并没有完全按预期分流。没有追踪数据,这个问题绝对看不出来。
5. 容灾演练和日常运维的落地细节
5.1 演练设计:从桌面推演到全量切换,一步步来
容灾演练最忌讳“第一次就全量真切”。真实故障时,团队压力大、操作链路长,如果平时没有循序渐进练过,“一键切换”绝对会变成“一键翻车”。我建议演练分成三档递进:
- 桌面推演:不实际动设备,所有人在会议室按切换手册过一遍流程,只说“你下一步干什么、要考虑什么”。主要目的是发现流程逻辑错误和角色分工缺失。
- 单域演练:只断一路链路,或者只切换DNS,范围可控,验证某个单项技术是否有效。
- 全量切换演练:模拟最坏场景,整个数据中心或整个云出口“不可用”,所有流量切到灾备中心,业务全量运行一段时间后回切。
真正到了全量演练,操作窗口要刻意选择。平时大家习惯凌晨操作,但真实故障发生在白天高峰的概率更高。我后来会建议团队定期做一次白天高峰期的短时切换演练,不追求长时间运行,只验证“高峰流量下切换是否扛得住”,这往往会暴露很多凌晨演练看不出的问题。
5.2 演练翻车现场实录:常见故障与排查思路
这些年演练和真实故障中,有几类问题反复出现,我直接列出来供参考。
第一类是DNS缓存导致切换不生效。演练时GSLB已经切换解析到备中心,但线上用户因为TTL和递归DNS缓存,大量用户还在访问主站IP。排查思路是用dig @指定DNS服务器 域名逐步验证权威解析、递归解析的TTL变化;解决办法就是前文提到的,把核心域名TTL降到60秒,并推动业务侧对缓存做合理清理。
第二类是防火墙状态表作祟。流量切换后,新链路的SYN包到达防火墙,但防火墙因为是状态检测机制,没有对应会话记录,直接丢弃。排查时看会话表老化时间和切换前是否清空。解决办法是在切换脚本里加入“清防火墙会话表”的步骤,或者依赖确定性NAT规则让新会话自然建立。
第三类是长连接没有排空。数据库连接池和消息长连接在切换后全部重置,大量请求同时回源,系统短暂雪崩。排查时通过四层负载均衡的连接数曲线能看到断崖式下降和尖峰突起。解决办法是提前配置优雅排空和连接池的快速重连参数,让存量连接平滑退出,新连接分步进入。
第四类是回切时的路由优先级问题。主链路恢复后,原以为流量会自动回到主链路,结果因为备链路的本地优先级配得更高,流量一直压在备线上不走。排查时看BGP路由表中的AS Path和本地优先级即可找到原因。这说明演练不仅要练“切过去”,还要练“切回来”,回切逻辑在真实故障中同样要过关。
5.3 切换手册、变更管理与团队协作,不能只靠“老师傅的脑子”
容灾切换不是某一个人的活儿,必须落到文档和流程上。切换手册至少要包含以下内容:故障判断标准、指挥角色和分工、主备网络路径图、每类故障的切换步骤、命令/操作确认表、回滚方案、恢复后的验证清单。
手册要跟着变更及时更新。我见过不少团队,手册写了三年没改,设备IP早就变了、链路拓扑早就重构了,演练时按照手册操作全是错。更合理的做法是把网络配置纳入版本管理,设备配置变更时同步更新手册,演练前做一次“手册与实际环境对照评审”。
团队协作层面,容灾切换必须有一个明确的指挥者。故障发生时最忌“十个人十种判断”,有人想切DNS,有人想重启专线,有人在拔光纤测试,现场一片混乱。建议指定一名容灾指挥,负责决策“是否切换”;一名执行操作员,负责按手册执行;一名验证观察员,负责实时反馈业务拨测和监控状态。每一步操作都要求执行前确认、执行后回报,减少人为失误。
6. 常见问题与避坑清单,这部分是纯经验汇总
| 问题场景 | 根因分析 | 排查手段 | 解决建议 |
|---|---|---|---|
| 两条专线同时中断 | 表面上双链路,实际同运营商、同局端、同物理路径 | 核查链路归属和物理路由 | 多运营商、多局端、物理路径隔离 |
| DNS切换后用户仍访问旧地址 | TTL过长,递归/客户端缓存严重 | dig验证各层级DNS解析TTL | 核心域名TTL降至60秒,客户端合理缓存 |
| 切换后新链路流量不通 | 防火墙状态表无会话记录 | 查看防火墙会话表 | 切换流程加入清会话表步骤 |
| 链路正常但业务卡顿 | 网络质量劣化,时延/丢包超阈 | 拨测和网络质量指标对比 | 设置质量劣化告警,提前介入 |
| BGP已切换但业务未完全分流 | 本地优先级或AS Path控制不符合预期 | 查看BGP路由表属性 | 回切和负载策略在演练中重点验证 |
| 长连接切换后雪崩 | 存量连接未排空,瞬时重连冲击 | 观察负载均衡连接数曲线 | 启用优雅排空、连接池快速重连 |
| 大二层链路震荡导致业务抖动 | 广播域过大,收敛慢 | 查看STP收敛日志 | 转三层互联,避免跨机房大广播域 |
| 演练频频“误伤”业务 | 切换顺序错误,应用未完待命先断网 | 按手册逐步执行并确认每步结果 | 采用半自动切换平台+人工闸口 |
除了表格里的这些,还有几个“心法”级别的提醒,都是我亲手踩过的坑。
别迷信全自动切换。自动化程度再高,也要留人工确认的闸口,尤其是跨中心、跨云切换。自动化脚本要有人评审、有版本、有回滚,不能黑盒式运行。
别忽略上层应用对网络切换的感知。网络切通了,应用连接池、客户端缓存、长连接未必跟着切。网络团队和数据团队、应用团队要做联合演练,而不是各演各的。
别只盯机房冗余,运营商侧故障照样致命。跨运营商互访质量、主干光缆中断、局端设备故障,这些不是企业机房内的问题,但直接影响业务。所以拨测节点必须放到远端,发现“外部看不可达”的盲区。
别把“备份”和“容灾”划等号,也别把“链路冗余”等同于“网络可用”。备份只是容灾的一部分,链路冗余只是网络容灾的一部分。真正决定容灾效果的,是端到端的切换演练和回切演练。
每次变更后,配置纳入版本管理。这个习惯能救命。出过很多次事故,最后发现根因不过是一条ACL或多发布了一条路由,如果能对照变更记录快速回滚,恢复时间能缩短一大截。
我个人这些年最大的体会是:网络容灾做得好的团队,往往不是设备买得最多、自动化脚本写得最漂亮的,而是把“最坏情况下的那20分钟”反复推演、反复演练过的团队。技术选型、设备参数固然重要,但真正让企业在数智化转型中扛住网络故障的,是那些被朴实地验证过无数次的流程和细节。
最后再分享一个实战小技巧:演练时间别总挑凌晨,找个业务相对可控的白天时段做一次短时轻度切换演练。你会在众目睽睽之下发现平时深夜演练根本暴露不了的协作问题、工具问题、人的问题。这些问题才是真实故障来临时最致命的。