中午十一点,正想着中午吃什么呢,系统突然疯狂告警。
一分钟两百多条 ERROR 日志,数据库连接池不断超时、拒绝新连接。
回滚、重启大法也不好使。怀疑是下载程序出了问题,于是先把下载服务停了。
安静了 5 分钟。
然后又开始了。
牛马程序员饭也吃不上,用尽各种手段,也只能眼睁睁看着系统发疯。
最后想起来追踪请求来源。
好家伙——username=产品经理 一个小时干了两三千条请求。
而系统平时的正常请求量,也就百十条/小时。
牛马 A 说,产品经理最近不是在用 WorkBuddy 开发 xx 系统吗?
过去一看,好家伙,发现是他的 AI 在后台疯狂调用。
赶紧把线程 kill 了,系统恢复正常。
于是本牛马给产品经理打电话确认。
产品经理: “没有啊,AI 早上跑了一会儿,早都停了。”
随后产品经理骂骂咧咧地回到办公室,看了一眼电脑:
“你看,根本没有请求嘛!这下好了,午休都没法睡了。”
一听这话我就火了:
“你还午休没法睡了?我们连饭都还没吃呢!”
妈的,这群鸟人见识到 AI 的厉害之后,用起来真是没轻没重的,一点节制都不讲。
居然敢直接打生产环境。
打就打了吧,TMD 好歹限制一下频率和次数吧?
自己系统什么抗压能力,心里没点 B 数吗?
限流、熔断、降级,一个都没有。
真 TMD:
最大的敌人,永远来自内部。
