服务器崩的时候不会通知你,是你被通知。我忽然觉得,这可能就是这一行的常态。我把这台机器的时区改成了东八区,日志时间终于看懂了。我把它写进了组内的避坑文档第一章

服务器凌晨三点宕机,告警短信比闹钟还准时。我默默打开了编辑器,准备一步步验证。我把这个服务的降级开关打开了,核心链路终于保住。真香定律准时生效

服务器的问题有一半来自人为变更,另一半来自没做的变更。我在心里给这次的容量扩了倍,结果只用了一半。幸好之前留了备份

服务器凌晨三点宕机,告警短信比闹钟还准时。我先给自己泡了杯茶,做好了打持久战的准备。我把这个服务的健康检查路径改对了,它终于不再假死。同事说这波操作可以写进新人培训教材

这个 bug 每次只在周五下午出现,我们都怀疑服务器也想过周末。我把它记在心里,没跟任何人说。我默默把这次故障写进了值班手册。连茶水间都安静了

我登上了那台机器,第一件事是看磁盘。我把手上的资料翻出来又读了两遍。我在心里把这次的排障时间线记了下来,留着写事故报告。果然现实比段子更精彩

这台机器的配置是我三年前定的,当时的量只有现在的一成。我想反驳,但发现他说得对。我在心里给这台机器的生命周期做了个备注,明年该换了。感动,然后我学到了新的一课

服务器不会因为你是半夜而对你温柔一点。我不知道该说什么,就笑了笑。我在心里给这个环境起了个名,叫「半生产」。同事说这波操作可以写进新人培训教材

域名解析没生效,全组人围着 DNS 排查了两小时,最后是本地 hosts 没删。我重新看了一遍手上的计划,把风险项标了出来。我把这个服务的备份策略改成了每天两次,心里踏实些。果然现实比段子更精彩

这个 bug 每次只在周五下午出现,我们都怀疑服务器也想过周末。我在心里点了点头。我把这台机器的登录审计打开了,谁改的终于查得到。我把这条经验写进了团队 wiki