消息,智谱发文复盘GLM-5系列模型在coding agent场景下出现乱码、复读和生僻字的问题。自3月起,用户反馈异常仅在高并发、长上下文任务中触发。智谱称其推理系统每天承受数亿次coding agent调用。经过排查,团队定位到两个独立的竞态bug。第一个bug出在pd分离架构,解码侧超时中止请求后回收kv cache,但预填充侧的rdma写入未结束,新请求覆盖旧数据。修复方法是在回收前加显式同步,异常率从万分之十几降至万分之三以下。第二个bug出在hicache,加载和计算两条流水线缺少同步点,计算侧可能在数据未加载完毕时读取。修复后异常完全消失,补丁已提交sglang社区。团队还发现,投机采样的接受率指标可作为异常检测信号,乱码时草稿token几乎全被拒绝,复读时接受率偏高。
消息,顶级风投机构Founders Fund和Thrive Capital等将募资周期缩短至不足两年。Founders Fund去年募集...
2 麻吉黄立成:ETH多单减持825枚,当前盈亏消息,麻吉黄立成在ETH多单中减持825.00枚,约合1,408,237.50美元。当前持仓规模为4,049,750.00美元...
3 币安宣布上线6个ZMU稳定币交易对消息,币安宣布将ZMU/USDT、ZMU/USDT、ZMU/USDT等6个代币添加到多个服务中,包括期货合约,预计于...
4 主力巨鲸平仓BTC及ETH空单,规模达8000万美消息,HyperLiquid上做空BTC和ETH的主力巨鲸已将头寸完全平仓,规模达8000万美元。该巨鲸此前以...
5 孙宇晨从Poloniex提取1.2万枚ETH,价值约1消息,孙宇晨从Poloniex交易所提取1.2万枚ETH,按当前价格计算,价值约1950万美元。...
6 拦截并击落了五枚从伊朗发射、飞向阿兹消息,据约旦国家电视台:约旦武装部队称,拦截并击落了五枚从伊朗发射、飞向阿兹拉克的...
7 伊朗无人机袭击科威特美军基地伊朗无人机袭击了位于科威特的美军基地。此前,伊朗已打击了位于巴林的美军第五舰队设施...
8 鲸鱼地址花费1687万DAI购入1.04万枚ETH消息,鲸鱼地址在12小时前花费1687万DAI购入1.04万枚ETH,均价为1626美元。该地址目前持有5000万...
9 此前美国的袭击导致锡里克一处通信塔受消息,伊朗革命卫队:此前美国的袭击导致锡里克一处通信塔受损,并摧毁了两处储水系统。...
10 已对地区内部分美军基地实施打击消息,伊朗最高联合军事指挥部:已对地区内部分美军基地实施打击,以回应美国对伊朗南部...
成都来彰科技 蜀ICP备2025134723号-1
资讯来源互联网,如有版权问题请联系管理员删除。