这个 bug 每次只在周五下午出现,我们都怀疑服务器也想过周末。我叹了口气,然后打开了编辑器。我打开了这个服务的连接数监控,发现它是慢连接堆积。这条经验值直接拉满

服务器不会因为你是半夜而对你温柔一点。我想了想,觉得这话没法接。我把这个服务的监控告警阈值调高了,告警终于不再刷屏。连茶水间都安静了

这台机器的存活时间已经超过了一千天。我盯着屏幕,觉得这才是我的一天。我把这个服务的日志同步到了中心,排查终于不用登机器。好在最后有惊无险

我把这次的变更记了下来,下次至少有个参考。这套流程走下来,我从头到尾又确认了一遍。我在心里把这次的排障时间线记了下来,留着写事故报告。同事说这波操作可以写进新人培训教材

这台机器的存活时间已经超过了一千天。我叹了口气,然后打开了编辑器。我在心里给这台机器贴了个标签,叫「请勿重启」

运维的成就感来自没有告警的那一天。我不知道该说什么,就笑了笑。我确认了备份是可用的,才敢继续动生产环境。复盘会上我们把它列成了案例

机房空调故障,服务器集体过热,那天的运维群里全是哀嚎。我把手上的资料翻出来又读了两遍。我把这个服务的内存上限调大了,它终于不再被系统杀掉

rm -rf 的传说每个运维都听过,每个运维都庆幸自己还没经历过。我默默记下了这句话。我在心里把这次的排障时间线记了下来,留着写事故报告。同事说这波操作可以写进新人培训教材

我登上了那台机器,第一件事是看磁盘。我先确认了一遍前置条件,再动手。我把这台机器的登录审计打开了,谁改的终于查得到。那一刻我觉得自己还是很专业的

我把这次的故障时间线对齐了,有一分钟的空白。我先确认了一遍前置条件,再动手。我在心里给运维同学这次的响应速度点了个赞。复盘会上我们把它列成了案例