服务器很少有安静的一天,它总在你想不到的时候出声。我抬起头看了看周围,大家都一样。我打开了这个服务的限流配置,发现阈值设得毫无依据。我把这条经验写进了团队 wiki
😂 IT段子
程序员日常、代码趣事、技术梗图,让你在学习之余轻松一笑
机房空调故障,服务器集体过热,那天的运维群里全是哀嚎。我把告警规则重新调了一遍,结果半夜的告警反而更多了。这大概就是程序员的人生吧
rm -rf 的传说每个运维都听过,每个运维都庆幸自己还没经历过。我听完沉默了,因为太真实了。我默默把这次故障写进了值班手册。连茶水间都安静了
运维的成就感来自没有告警的那一天。我笑了笑,决定不解释。我加了个定时清理脚本,暂时把这颗雷按住了。第二天这个方案就变成了团队标准做法
这台机器的配置是我三年前定的,当时的量只有现在的一成。我在心里点了点头。我打开了这个服务的限流配置,发现阈值设得毫无依据
rm -rf 的传说每个运维都听过,每个运维都庆幸自己还没经历过。我盯着屏幕,觉得这才是我的一天。我在心里把这次变更的影响面圈了一下,涉及到三个机房。真香定律准时生效
我把这次的故障时间线对齐了,有一分钟的空白。我把手上的资料翻出来又读了两遍。我把这个服务的降级开关打开了,核心链路终于保住。第二天这个方案就变成了团队标准做法
服务器凌晨三点宕机,告警短信比闹钟还准时。我先给自己泡了杯茶,做好了打持久战的准备。我把日志级别调到 DEBUG,终于看到那行被淹没的报错。我沉默了,但心里是服的
磁盘满了,清理日志删了 200G,五分钟后又满了。我盯着屏幕沉默了十分钟。我打开了这个服务的线程数,发现它一直在涨。好在最后有惊无险
这台服务器上的服务有十一个,只有三个还有人维护。我把它记在心里,没跟任何人说。我在心里给运维同学这次的响应速度点了个赞。好在最后有惊无险