当前位置:主页 > 业界 >

万亿参数开源模型跑出981词秒,Cerebras测试KimiK2.6提速29倍

时间:2026-05-20 19:57:07

  消息,Cerebras宣布在企业测试中上线万亿参数大模型Kimi K2.6,通过直接在整张12英寸硅晶圆上集成芯片,彻底消除了传统板级通信的互联延迟。第三方评测机构Artificial Analysis实测显示,其生成速度达到981 tokens/s,比主流GPU云服务快6.7倍。在10000输入、500输出token的长文本任务中,总响应耗时从Kimi官方接口的163.7秒缩短至5.6秒,提速达29倍。由于模型权重被分配到多个晶圆中流式传输激活值,层间通信完全运行在晶圆内部的网络织网上,其物理通信带宽达到英伟达NVL72架构中NVLink的200倍以上。配合分布式计算优化,Kimi K2.6以原始的4-bit权重进行低损存储,计算时使用16-bit浮点数维持精度,并采用定制算子内核与推测性解码最终达成实时化运行。

热点推荐
1 Matt Cole:STRC和SATA或将开启3万亿美元数字

Strive首席执行官Matt Cole预测,STRC和SATA可能开启一个与比特币收入产品相关的3万亿美元数字信...

2 最新行情晚报:BTC比特币价格跌破61000美

XBIT Wallet数据来源,比特币Bitcoin今日行情消息,BTC比特币最新价格:$60980.84000000,24小时跌-2...

3 赵长鹏:美国加密货币交易者因流动性不

消息,Binance创始人赵长鹏表示,美国加密货币交易者因流动性不足面临更高价格,并希望Bin...

4 Gate将上线Nesa (NES)永续合约交易

消息,Gate将于6月24日21:10 上线Nesa 永续合约交易,支持USDT结算,杠杆倍数为1-20倍。...

5 Ripple推出原生贷款和收益产品,扩展至

消息,Ripple高管Reece Merrick确认,XRP Ledger将推出原生贷款和收益产品,进一步扩展DeFi领域。知...

6 YZi Labs结束与BNB财库公司CEA Industries的代理

消息,YZi Labs宣布结束与BNB财库公司CEA Industries的代理战。CEA正在进行董事会重组,此前与YZi...

7 以色列国防军:在黎巴嫩南部打击了两名

消息,以色列国防军:在黎巴嫩南部打击了两名真主党武装分子,这些人对我们部队构成了威...

8 分析师:Bitmine欲占有以太坊5%供应,现持

消息,Bitmine Immersion Technologies目前持有5,672,956枚以太坊,价值约100亿美元,约占以太坊总供应...

9 韩国金融服务委员会启动代币证券基础设

消息,韩国金融服务委员会已启动资本市场基础设施审查会议,将代币证券基础设施纳入资本...

10 Cboe推出SP 500预测市场合约

消息,Cboe全球市场宣布推出首个与SP 500表现相关的预测市场合约,扩展其衍生品业务,推出新...

成都来彰科技 蜀ICP备2025134723号-1

资讯来源互联网,如有版权问题请联系管理员删除。