毕加昊
2026年11月5日 09:53
宿舍断电那晚,我忘了给自己的服务器留一条退路。
晚上十一点半,宿舍的闸准时跳了。这是每周都会发生的事,大家早就习惯了——手机插上充电宝,电脑提前存好档,谁也不会真的被打断什么。
我唯一没算进去的是,我的服务器也被算在断电名单里。
准确地说,机器不在宿舍,它在一个很远的机房;但我的整个工作流挂在那条线路上,中间只要断一环,我这边什么都看不见。
十二点来电,我第一件事是摸手机看监控页。全红。
我以为是监控挂了,又打开浏览器直接访问域名,转圈,最后给我一个 502。那一刻我整个人是清醒的,脑子里开始一条条过:证书?域名解析?还是机房那边出了问题?
我爬起来开电脑,连上后台,容器列表空空荡荡。重启,起来了。三点多又挂了一次。
第二天早上六点,我上床之前最后看了一眼,还是红的。那天上午的课我一句话没听进去,满脑子都是“为什么重启就好”。
后来原因特别朴素:服务没设开机自启。断电重启之后,机器醒了,服务没醒。我花了三个月给自己写各种监控告警、做了漂亮的仪表盘,却从来没在部署脚本里写下那一行让服务跟着系统一起起来的命令。
补上那一行只用了十秒钟。
我坐在椅子上发了很久的呆。我总以为线上系统真正的敌人是攻击、是异常流量、是那些听起来很厉害的东西。结果它输给了一次跳闸,和一行我懒得写的命令。
从那之后我给所有服务都加了开机自启,并且每个月挑一天手动重启一遍,假装自己又经历了一次断电。听起来有点小题大做,但那晚之后我确认了一件事:稳定不靠写得漂亮,靠的是那些看起来很笨、很无聊、但每次都要走一遍的检查表。