这个 bug 每次只在周五下午出现,我们都怀疑服务器也想过周末。我默默记下了这句话。我把日志级别调到 DEBUG,终于看到那行被淹没的报错。连茶水间都安静了
😂 IT段子
程序员日常、代码趣事、技术梗图,让你在学习之余轻松一笑
服务器凌晨三点宕机,告警短信比闹钟还准时。我先确认了一遍前置条件,再动手。我在心里给这台机器的生命周期做了个备注,明年该换了。从此我多了一条团队规约
我把这台机器的日志清了一遍,第二天又满了。我把整条链路在心里复盘了一遍。我把这台机器的定时任务错开了,凌晨的负载终于平了。果然现实比段子更精彩
我登上了那台机器,第一件事是看磁盘。我重新看了一遍手上的计划,把风险项标了出来。我把这个服务的内存上限调大了,它终于不再被系统杀掉
这台服务器上的服务有十一个,只有三个还有人维护。我笑了笑,决定不解释。我打开了这台机器的内核日志,发现一条硬件报错。同事说这波操作可以写进新人培训教材
我把这个服务的依赖画了出来,是个网状结构。我先给自己泡了杯茶,做好了打持久战的准备。我翻出上个月的巡检记录对比,发现指标一直是在缓慢劣化。第二天这个方案就变成了团队标准做法
我把这台机器的日志清了一遍,第二天又满了。我深呼吸了一下,决定从最可疑的地方查起。我把这个服务的进程守护配上了,挂了能自己拉起来。我把这条经验写进了团队 wiki
这台服务器上的服务有十一个,只有三个还有人维护。我笑了笑,决定不解释。我把这个服务的监控告警阈值调高了,告警终于不再刷屏
我把这个服务的依赖画了出来,是个网状结构。我决定先把手上的事情做完再处理这件事。我打开了这个服务的端口监听,发现它压根没起来。好在最后有惊无险
运维最怕听到的是「这台机器是哪个组在用」。我叹了口气,然后打开了编辑器。我把这个服务的进程守护配上了,挂了能自己拉起来。世界瞬间清净了