热天中文网

第六十四章 救火版(第2页)

天才一秒记住【热天中文网】地址:https://www.rtzw.net

赵磊说,“我现在就提。”

“別等审批,能拉多少先拉多少,配额不够他们会拒绝,到时候再说。”

掛断电话,他赶紧给梁宇打了个电话,让他帮忙催一下优先级。

他推开办公室的门时,气氛跟他走之前完全不一样。

赵磊坐在工位上,三个终端窗口全开著,右边的监控面板一片红,姜亦心站在他身后,不知道该干什么。

苏念念、李婷和陆明洲在会议室,手在电脑上疯狂打字,用户反馈群一直在弹消息。

他径直走到座位上,打开电脑。

开启视界。

【开物·系统状態】

【推理实例:66过载|gpu利用率:100%】

【推理队列:2847请求等待|平均推理时间:amp;gt;120s(正常值:8-12s)】

【请求超时率:42.3%|状態:服务降级】

【原因:为同时在线两千人设计,现在在线五千+】

每个用户都在提交生成请求,算力根本扛不住,请求堆进来出不去,用户刷新又製造新请求,越堆越崩。

“赵磊,姜亦心。”

两个人立刻围了过来。

“赵磊,你先把队列监控拉出来,一会儿队列分离你来做。

“他看了一眼姜亦心,“小姜,你搬把椅子过来,学习的机会,一会帮我跑脚本。

韩路一低头开始敲命令。

“要不要把陈建业叫回来?”

赵磊问了一句。

“他孩子生病了,別叫了。”

韩路一说,眼睛没离开屏幕。

第一步,扩推理实例。

梁宇那边动作快,青岳已经把配额放开了,韩路一在配置文件里把实例数从六个直接拉到二十个,改完推给姜亦心。

“跑这个部署。”

姜亦心接过来,手指都在发抖,但敲得很快,部署脚本跑起来了,终端开始刷日誌。

新实例一个一个上线,监控面板上队列在分流,超时率开始往下掉,三十五……三十……

两分钟后,超时率降到百分之十五。

还是高,但至少不是瀑布式崩溃了。

第二步,加速率限制。

韩路一现写了一个中间件:单用户请求频率超过閾值,不再让请求排进队列等到超时,直接返回一个“排队中,请稍后重试”

的提示页。

“这个也部署上去。”

姜亦心接过去跑。

效果立竿见影——用户端从“一直转圈”

本章未完,请点击下一章继续阅读!若浏览器显示没有新章节了,请尝试点击右上角↗️或右下角↘️的菜单,退出阅读模式即可,谢谢!

如遇章节错误,请点击报错(无需登陆)

新书推荐

楼白的游戏王奇妙冒险开局签到送封号斗罗吾家骄妻初养成带个系统去抗日诸天:从放火烧唐三开始无上崛起我靠脸在无限流世界装小可怜穿成炮灰原配的女儿被奶奶按头结婚?爷他一秒沦陷了西游化龙锅影忍者空间农女:疯批相公娇弱可欺年代文里的美艳娇气包[快穿]让反派后继有人吧!这真是转生眼木叶:开局女装忽悠鼬绝品狱医魔王大人很烦恼总裁大人超给力娱乐大忽悠斗罗之圣剑使我哥是动物之主[快穿]替天行盗快穿之宿主她飘了全服第一混分王[星际]