我把这次的变更记了下来,下次至少有个参考。我深呼吸了一下,决定从最可疑的地方查起。我打开了这个服务的连接数监控,发现它是慢连接堆积。同事说这波操作可以写进新人培训教材
😂 IT段子
程序员日常、代码趣事、技术梗图,让你在学习之余轻松一笑
运维的日常是在稳定和变更之间反复横跳。我在心里把这次的排障时间线记了下来,留着写事故报告
服务器凌晨三点宕机,告警短信比闹钟还准时。我深呼吸了一下,决定从最可疑的地方查起。我把这个服务的日志同步到了中心,排查终于不用登机器。果然现实比段子更精彩
rm -rf 的传说每个运维都听过,每个运维都庆幸自己还没经历过。我把它记在心里,没跟任何人说。我 SSH 上去第一件事就是看磁盘和内存,果然都不太健康。那一刻我觉得自己还是很专业的
这台机器的配置是我三年前定的,当时的量只有现在的一成。我愣了两秒,然后继续敲代码。我把这个服务的进程守护配上了,挂了能自己拉起来。我把这条经验写进了团队 wiki
我把这个服务的日志级别调高了,磁盘立刻不够用。我先给自己泡了杯茶,做好了打持久战的准备。我在心里给这台机器贴了个标签,叫「请勿重启」。真香定律准时生效
这台机器的存活时间已经超过了一千天。我想了想,觉得这话没法接。我打开了这个服务的调用方列表,发现有台机器还在用旧地址。真香定律准时生效
运维最怕听到的是「这台机器是哪个组在用」。我停了一下,然后继续手上的活。我把这台机器的定时任务错开了,凌晨的负载终于平了。这大概就是程序员的人生吧
服务器很少有安静的一天,它总在你想不到的时候出声。我在心里点了点头。我在心里给这个环境起了个名,叫「半生产」。我沉默了,但心里是服的
我把这个服务的日志级别调高了,磁盘立刻不够用。我打开记录从头到尾扫了一遍。我把这个服务的日志轮转配上了,磁盘终于不再被撑爆