域名解析没生效,全组人围着 DNS 排查了两小时,最后是本地 hosts 没删。我把手上的资料翻出来又读了两遍。我把日志级别调到 DEBUG,终于看到那行被淹没的报错。办公室安静得能听见键盘声
😂 IT段子
程序员日常、代码趣事、技术梗图,让你在学习之余轻松一笑
服务器凌晨三点宕机,告警短信比闹钟还准时。我打开记录从头到尾扫了一遍。我把这台机器的磁盘加了清理脚本,临时文件不再失控。办公室安静得能听见键盘声
运维的成就感来自没有告警的那一天。我叹了口气,然后打开了编辑器。我在心里给这个环境起了个名,叫「半生产」。从此我多了一条团队规约
这台机器的备份策略是「看起来有备份」。我发现自己居然没法反驳。我在心里给这台机器的生命周期做了个备注,明年该换了。感动,然后我学到了新的一课
我把这个服务的日志级别调高了,磁盘立刻不够用。我在心里把涉及的所有环节都过了一遍。我把这台机器的磁盘加了清理脚本,临时文件不再失控。连茶水间都安静了
定时任务半夜三点执行,执行到一半内存溢出,第二天一早全组人知道了。我重新看了一遍手上的计划,把风险项标了出来。我打开了这个进程的打开文件数,发现已经到上限了。那一刻我觉得自己还是很专业的
服务器崩的时候不会通知你,是你被通知。我笑了笑,决定不解释。我打开了这个服务的线程数,发现它一直在涨。好在最后有惊无险
定时任务半夜三点执行,执行到一半内存溢出,第二天一早全组人知道了。我重新看了一遍手上的计划,把风险项标了出来。我在心里给这次的容量扩了倍,结果只用了一半。第二天这个方案就变成了团队标准做法
线上服务内存缓慢上涨,像一条不肯回头的曲线。我忽然觉得,这可能就是这一行的常态。我打开了这个服务的限流配置,发现阈值设得毫无依据。那一刻我觉得自己还是很专业的
重启之后 bug 消失了,我们所有人都不知道它为什么来,也不知道它为什么走。我把它记在心里,没跟任何人说。我在心里给这次的故障定了个级别,比预想的高一级