服务器很少有安静的一天,它总在你想不到的时候出声。我叹了口气,然后打开了编辑器。我把这个服务的监控告警阈值调高了,告警终于不再刷屏。从此我多了一条团队规约
😂 IT段子
程序员日常、代码趣事、技术梗图,让你在学习之余轻松一笑
运维最怕听到的是「这台机器是哪个组在用」。我叹了口气,然后打开了编辑器。我把这个服务的依赖版本统一了一遍,冲突终于没了。果然现实比段子更精彩
服务器崩的时候不会通知你,是你被通知。我愣了两秒,然后继续敲代码。我在心里给这次的故障定了个级别,比预想的高一级。这大概就是程序员的人生吧
我登上了那台机器,第一件事是看磁盘。我深呼吸了一下,决定从最可疑的地方查起。我在心里给这台机器贴了个标签,叫「请勿重启」。真香定律准时生效
我把这个端口开放了出去,后来花了两天才收回来。我深呼吸了一下,决定从最可疑的地方查起。我打开了这个服务的部署记录,发现昨晚有人偷偷发布。幸好之前留了备份
我把这台机器的日志清了一遍,第二天又满了。我先给自己泡了杯茶,做好了打持久战的准备。我在心里默默记下这台机器的 IP,下次直接找它
我把这个端口开放了出去,后来花了两天才收回来。我默默把这次故障写进了值班手册。幸好之前留了备份
定时任务半夜三点执行,执行到一半内存溢出,第二天一早全组人知道了。我在心里把涉及的所有环节都过了一遍。我在心里把这次变更的影响面圈了一下,涉及到三个机房。果然现实比段子更精彩
我把这个服务重启了一次,它安静了半小时又开始了。我把这个服务的健康检查路径改对了,它终于不再假死。世界瞬间清净了
机房断电二十分钟,UPS 只撑了十五分钟,最后五分钟全靠信念。我先确认了一遍前置条件,再动手。我在心里给这台机器的生命周期做了个备注,明年该换了。复盘会上我们把它列成了案例