当前位置:主页 > 头条 >

罗福莉解密MiMo降本底牌:预填充注意力计算量降至10层全局GQA级别

时间:2026-05-27 22:46:08

  消息,罗福莉在X平台公布了自研大模型MiMo-v2.5系列实施API永久性降价后的算法降本机制。她透露,在API价格对齐DeepSeek后,小米的高负载推理引擎仍能保持盈亏平衡,成本降低主要来自混合注意力架构与层次化KV缓存优化。针对缓存命中成本降低99%的设计目标,小米推理框架实现了针对滑动窗口注意力SWA的层次化KV缓存优化,生产测试显示,层次化优化将缓存的token容量提升至5倍,降低了80%的缓存成本。罗福莉表示,低成本的推理服务有利于激发终端智能需求,大模型企业应当避免盲目的价格战,通过算法与推理系统的底层协同设计,将实际运行开销控制在盈亏平衡线以下。

热点推荐
1 LAB热度上升,24h成交量放大至近7日平均水

消息,据a早期发行in监测,LAB过去24小时成交量放大至近7日平均水平的3.9倍,价格累计下跌5...

2 阿里巴巴新AI模型称仅次于Anthropic的Fabl

消息,阿里巴巴宣布其新AI模型Qwen3.8 Max的参数量达到2.4万亿,声称在领先的前沿AI模型中仅次...

3 Solana网络单日收入重回区块链榜首,为近

消息,据Solanafloor数据,Solana在7月18日的网络收入位居所有区块链第一,这是近五个月以来的首...

4 Nouriel Roubini:AI可能迫使政府采用普遍基

消息,Nouriel Roubini在接受Bloomberg TV采访时警告,人工智能的快速发展可能迫使各国政府选择普...

5 A股三大股指走低,深证成指跌2%

7月20日,A股三大股指走低,深证成指跌2%,创业板指跌1.34%,沪指跌0.51%。...

6 MetaMask聘用朝鲜黑客,未造成实质损失

消息,MetaMask聘请了与朝鲜有关的黑客作为开发者,该黑客GitHub账号imyugioh自2025年9月起已在L...

7 BTC、ETH、SOL和XRP ETF上周净流入情况

消息,上周比特币、以太坊、索拉纳和瑞波币现货ETF均出现净流入。其中,比特币净流入7567万...

8 国信证券吴信坤:阶段性买点或已出现

消息,国信证券策略首席分析师吴信坤发布最新研究报告表示,截至7月17日,全部A股PE为21.8倍...

9 Binance停止支持Moonriver和Moonbeam主网

消息,Binance宣布停止支持Moonriver和Moonbeam主网,并开放上述代币通过Base网络进行充值和提现。...

10 SpaceX定于7月23日进行Starship第13次飞行测试

消息,SpaceX计划于7月23日进行Starship的第13次飞行测试,此前在7月16日的发射中因发动机点火故...

成都来彰科技 蜀ICP备2025134723号-1

资讯来源互联网,如有版权问题请联系管理员删除。