当前位置:主页 > 业界 >

Cerebras推出云端AI服务,速度远超AWS

时间:2024-11-27 15:23:59

  Cerebras公司近日宣布,其专为AI应用设计的第三代晶圆级引擎(WSE-3)芯片打造的云端AI服务Cerebras Inference。

  在处理Meta的4,050亿参数大型语言模型Llama 3.1时,每秒可处理969个词元,速度较AWS利用NVIDIA或AMD GPU所打造的云端AI服务快了75倍。

  据悉,Cerebras Inference运行Llama 3.1模型的速度是目前全球最快的,比GPT-4快12倍,比Claude 3.5 Sonnet快18倍。而在处理分子动态模拟任务时,单个第二代WSE也比全球排名第二的超级电脑快了768倍,比专为该任务设计的超级电脑Anton 3高出20%。

  此外,Cerebras Inference在处理80亿和70亿参数的Llama 3.1模型时,速度是由NVIDIA GPU打造的AWS服务的20倍。

  在测试当中,Cerebras Inference也远超其他以GPU打造的AI云端服务,如Fireworks需耗时20秒的西洋棋程序测试,Cerebras Inference只需3秒。

  Cerebras表示,其WSE芯片在处理大规模AI模型和复杂计算任务时具有显著优势,将为用户带来前所未有的速度和效率。

热点推荐
1 税收服务重庆成都双核联动联建第三次联

5月19日,税收服务重庆成都双核联动联建第三次联席会议在成都市双流区召开。成渝税务部门...

2 半导体“暴力”拉抬 科创50飙上历史收盘

半导体板块强势走高,带动科技股整体有所表现,科创50指数探底回升振幅超过6%,收盘涨幅近...

3 又一艘万亿“券商航母”加速驶来!中金

5月18日晚间,中金公司发布 根据公告,中金公司为本次交易的吸并方,而东兴证券、信达证券...

4 明尼苏达州成为首个允许银行提供加密托

消息,明尼苏达州已成为首个允许银行和信用合作社的中西部州。这一举措标志着该州在加密...

5 Bitget BZ合约持仓量24小时增长超28%居全网

消息,受中东地缘局势阶段性降温影响,国际原油价格出现回落。根据Bitget行情数据显示,布...

6 Coinbase Markets:股票与金属永续合约上线

消息,吴说获悉,Coinbase Markets发文称,其股票与金属永续合约上线个月以来,累计交易量已超...

7 比特币ETF总净流出达6.49亿美元,创2026年

消息,5月18日比特币ETF总净流出为6.4861亿美元,成为2026年第三大流出。其中,黑石的$IBIT流出...

8 链上分析师余烬:ondo项目方多签钱包向

消息,据链上分析师余烬监测,在过去2个月时间里,ondo项目方的多签钱包累计向Coinbase等交易...

9 中金:美联储年内或难以降息

消息,中金研报称,近期多项美国通胀数据超预期,就业市场趋于稳定。债券出现抛售,市场...

10 麻吉黄立成:ETH多单增持650枚,当前盈亏

消息,麻吉黄立成在HyperLiquid平台上增持ETH多单650枚,约合1,452,880.00美元。目前持仓规模为8,...

成都来彰科技 蜀ICP备2025134723号-1

资讯来源互联网,如有版权问题请联系管理员删除。