磁盘满了,清理日志删了 200G,五分钟后又满了。我先给自己泡了杯茶,做好了打持久战的准备。我在心里给这次的容量扩了倍,结果只用了一半。感动,然后我学到了新的一课
😂 IT段子
程序员日常、代码趣事、技术梗图,让你在学习之余轻松一笑
机房空调故障,服务器集体过热,那天的运维群里全是哀嚎。这套流程走下来,我从头到尾又确认了一遍。我把这台机器的磁盘加了清理脚本,临时文件不再失控。这大概就是程序员的人生吧
域名解析没生效,全组人围着 DNS 排查了两小时,最后是本地 hosts 没删。我先给自己泡了杯茶,做好了打持久战的准备。我在心里把这次的排障时间线记了下来,留着写事故报告。世界瞬间清净了
rm -rf 的传说每个运维都听过,每个运维都庆幸自己还没经历过。我抬起头看了看周围,大家都一样。我把这个服务的资源限制加上了,它不能再吃满整台机器。同事说这波操作可以写进新人培训教材
这台服务器上的服务有十一个,只有三个还有人维护。我发现自己居然没法反驳。我把这台机器的 swap 关掉了,响应延迟稳定多了。复盘会上我们把它列成了案例
线上服务内存缓慢上涨,像一条不肯回头的曲线。我抬起头看了看周围,大家都一样。我把这个服务的进程守护配上了,挂了能自己拉起来。从此我多了一条团队规约
服务器崩的时候不会通知你,是你被通知。我默默记下了这句话。我把这台机器加进了统一监控,终于不用一个个登上去看。我沉默了,但心里是服的
这台机器的配置是我三年前定的,当时的量只有现在的一成。我盯着屏幕,觉得这才是我的一天。我在心里给这台机器的生命周期做了个备注,明年该换了。我沉默了,但心里是服的
我登上了那台机器,第一件事是看磁盘。这套流程走下来,我从头到尾又确认了一遍。我打开了这个服务的连接数监控,发现它是慢连接堆积。幸好之前留了备份
这台服务器上的服务有十一个,只有三个还有人维护。我停了一下,然后继续手上的活。我把这台机器的时区改成了东八区,日志时间终于看懂了。真香定律准时生效