当前位置:主页 > 业界 >

Cerebras推出云端AI服务,速度远超AWS

时间:2024-11-27 15:23:59

  Cerebras公司近日宣布,其专为AI应用设计的第三代晶圆级引擎(WSE-3)芯片打造的云端AI服务Cerebras Inference。

  在处理Meta的4,050亿参数大型语言模型Llama 3.1时,每秒可处理969个词元,速度较AWS利用NVIDIA或AMD GPU所打造的云端AI服务快了75倍。

  据悉,Cerebras Inference运行Llama 3.1模型的速度是目前全球最快的,比GPT-4快12倍,比Claude 3.5 Sonnet快18倍。而在处理分子动态模拟任务时,单个第二代WSE也比全球排名第二的超级电脑快了768倍,比专为该任务设计的超级电脑Anton 3高出20%。

  此外,Cerebras Inference在处理80亿和70亿参数的Llama 3.1模型时,速度是由NVIDIA GPU打造的AWS服务的20倍。

  在测试当中,Cerebras Inference也远超其他以GPU打造的AI云端服务,如Fireworks需耗时20秒的西洋棋程序测试,Cerebras Inference只需3秒。

  Cerebras表示,其WSE芯片在处理大规模AI模型和复杂计算任务时具有显著优势,将为用户带来前所未有的速度和效率。

热点推荐
1 标准Chartered支持的Anchorpoint将推出HKDAP稳定

标准Chartered支持的Anchorpoint已准备推出港元稳定币HKDAP,预计将在7月底前联合宣布。该稳定币将...

2 贝佐斯注资CuspAI探索新材料用于芯片制造

消息,贝佐斯所注资的英国创企CuspAI于周一成立人工智能材料铸造厂联盟,汇聚了逾48家科技巨...

3 Loopring完成L2 NFT返还,发送2046枚至1241个地

消息,吴说获悉,Loopring宣布已完成L2 NFT返还,通过9批以太坊主网交易向1241个一级网络地址发...

4 广发证券刘晨明:近期市场调整受外部因

消息,广发证券策略首席分析师刘晨明表示,近期A股回调主要源于外部输入性因素,属于情绪...

5 比特币现货ETF净流入7567万美元,以太坊净

消息,上周交易日比特币现货ETF净流入7567万美元,以太坊现货ETF净流入1.05亿美元,SOL现货ET...

6 AI杠杆押注担忧加剧,韩股大跌5%

消息,韩国KOSPI指数周一下跌5%,投资者纷纷平仓与人工智能相关的交易,延续四周连跌的颓势...

7 Scott Bessent:稳定币行业预计到2030年将实

消息,财政部长Scott Bessent表示,稳定币行业预计在未来几年内将实现指数级增长,可能在203...

8 币安将停止对Moonriver(MOVR)和Moonbeam(

消息,币安宣布将于2026年7月21日11:00停止对Moonriver和Moonbeam的主网支持,相关代币的存取款将暂...

9 Allbridge被黑客攻击,损失约165万美元

消息,Allbridge平台遭到黑客攻击,损失约165万美元。攻击者迅速将所有被盗资金跨链转移,并...

10 韩国调查40起加密操纵案件

消息,韩国金融服务委员会主席李玉源在虚拟资产用户保护法实施两周年之际发布数据显示,...

成都来彰科技 蜀ICP备2025134723号-1

资讯来源互联网,如有版权问题请联系管理员删除。