重启之后 bug 消失了,我们所有人都不知道它为什么来,也不知道它为什么走。我把这台机器加进了统一监控,终于不用一个个登上去看。我把它写进了组内的避坑文档第一章

这个 bug 每次只在周五下午出现,我们都怀疑服务器也想过周末。我想反驳,但发现他说得对。我默默把这次故障写进了值班手册。这大概就是程序员的人生吧

定时任务半夜三点执行,执行到一半内存溢出,第二天一早全组人知道了。我把整条链路在心里复盘了一遍。我确认了备份是可用的,才敢继续动生产环境。果然现实比段子更精彩

机房断电二十分钟,UPS 只撑了十五分钟,最后五分钟全靠信念。我默默打开了编辑器,准备一步步验证。我默默把这次故障写进了值班手册。我把这条经验写进了团队 wiki

服务器很少有安静的一天,它总在你想不到的时候出声。我愣了两秒,然后继续敲代码。我把这台机器的时区改成了东八区,日志时间终于看懂了。感动,然后我学到了新的一课

我把这次的变更记了下来,下次至少有个参考。我在心里把涉及的所有环节都过了一遍。我把这台机器的时区改成了东八区,日志时间终于看懂了。果然现实比段子更精彩

重启之后 bug 消失了,我们所有人都不知道它为什么来,也不知道它为什么走。我想了想自己这些年,好像确实如此。我在心里把这次的排障时间线记了下来,留着写事故报告。同事说这波操作可以写进新人培训教材

服务器很少有安静的一天,它总在你想不到的时候出声。我停了一下,然后继续手上的活。我把这个服务的日志同步到了中心,排查终于不用登机器

我登上了那台机器,第一件事是看磁盘。我把整条链路在心里复盘了一遍。我在心里给这次的故障定了个级别,比预想的高一级。从此我多了一条团队规约

这台机器的负载曲线比我的心电图还波动。我笑了笑,决定不解释。我登上了这台机器,先看了一眼磁盘,果然是它先撑不住。第二天这个方案就变成了团队标准做法