我把这台机器的日志清了一遍,第二天又满了。这套流程走下来,我从头到尾又确认了一遍。我在心里给这台机器贴了个标签,叫「请勿重启」。那一刻我觉得自己还是很专业的
😂 IT段子
程序员日常、代码趣事、技术梗图,让你在学习之余轻松一笑
运维的成就感来自没有告警的那一天。我听完沉默了,因为太真实了。我打开了这个服务的线程数,发现它一直在涨。幸好之前留了备份
我把这次的变更记了下来,下次至少有个参考。我把手上的资料翻出来又读了两遍。我打开了这台机器的进程列表,有个进程占了一半内存。幸好之前留了备份
机房断电二十分钟,UPS 只撑了十五分钟,最后五分钟全靠信念。我深呼吸了一下,决定从最可疑的地方查起。我在心里把这次变更的影响面圈了一下,涉及到三个机房。世界瞬间清净了
机房空调故障,服务器集体过热,那天的运维群里全是哀嚎。我决定先把手上的事情做完再处理这件事。我翻出上个月的巡检记录对比,发现指标一直是在缓慢劣化。从此我多了一条团队规约
重启之后 bug 消失了,我们所有人都不知道它为什么来,也不知道它为什么走。我想了想,觉得这话没法接。我把这台机器的内核对齐了一遍,虚拟化下的问题少了。那一刻我觉得自己还是很专业的
服务器不会因为你是半夜而对你温柔一点。我抬起头看了看周围,大家都一样。我把这台机器的定时任务错开了,凌晨的负载终于平了。果然现实比段子更精彩
这台服务器上的服务有十一个,只有三个还有人维护。我想了想自己这些年,好像确实如此。我在心里把这次的排障时间线记了下来,留着写事故报告。真香定律准时生效
机房空调故障,服务器集体过热,那天的运维群里全是哀嚎。我先给自己泡了杯茶,做好了打持久战的准备。我把日志级别调到 DEBUG,终于看到那行被淹没的报错
我把这个服务的依赖画了出来,是个网状结构。我确认了备份是可用的,才敢继续动生产环境。第二天这个方案就变成了团队标准做法