随着人工智能技术的快速发展,全球领先的AI公司,包括OpenAI、微软和Meta,正在纷纷采用一种名为“蒸馏”的技术,以创建更低成本、更高效的AI模型。这一技术的核心是通过一个大型的“教师”模型生成数据,训练一个小型的“学生”模型,从而将大型模型的知识快速转移,以实现更低的成本和更快的运行速度。
“蒸馏技术非常神奇。”OpenAI平台产品负责人Olivier Godement表示,这一过程能够将大型智能模型的能力传授给小型模型,使其在特定任务上表现出色,同时大幅降低运行成本。例如,OpenAI的GPT-4等大型语言模型需要巨额的开发和维护成本,但通过蒸馏,开发者可以在笔记本电脑或智能手机上快速运行其功能。
在中国,DeepSeek利用蒸馏技术基于开源系统构建了高效的人工智能模型,这一成就引起了全球的关注。然而,这也引发了对硅谷AI领导地位的质疑,甚至导致华尔街对美国大型科技股的信心受挫。蒸馏技术的普及,使得初创企业能够以更低的成本快速构建基于该技术的应用程序,这对传统AI巨头的商业模式构成了挑战。
尽管蒸馏模型在性能上可能不如大型模型,但它们在特定场景下表现出色。例如,IBM研究院的David Cox指出,大多数企业并不需要庞大的模型来运行产品,蒸馏模型已足够用于客服聊天机器人或在小型设备上运行。不过,大型模型仍将在高风险任务中发挥关键作用,因为这些任务需要更高的准确性和可靠性。
此外,蒸馏技术也引发了关于AI技术竞争的新思考。当大型语言模型的能力可以在几个月内被快速复制时,这意味着企业即使投入巨额资金开发大型模型,也可能很快被竞争对手赶超。这不仅对AI公司的商业模式提出了挑战,也让开源模式的优势更加凸显。Meta的首席AI科学家Yann LeCun表示,开源理念意味着开发者可以从全球技术进步中受益,而蒸馏技术正是这一理念的体现。
消息,罗伯特清崎再次呼吁追随者远离现金,转向硬资产。在6月13日的推文中,这位《富爸爸...
2 伊朗谈判团队顾问披露拟议谅解备忘录细伊朗谈判团队负责人战略顾问迈赫迪穆罕默迪披露了拟议中的伊朗与美国谅解备忘录部分细节...
3 黎巴嫩外交部:控告以色列袭击黎军军事消息,黎巴嫩外交部:我们已向安理会提交申诉,控告以色列袭击黎军军事机制并导致军人殉...
4 乌称打击俄境内战略油库消息,当地时间6月14日,乌克兰国家安全局发布消息称,该局下属阿尔法特种作战中心遵照乌...
5 NEAR成交量飙升5倍币安NEAR/USDT永续合约在10分钟内成交量飙升5倍,近24小时成交额达到2.12亿美元,涨幅为3.60%。成...
6 美国SEC批准T. Rowe Price的多资产加密ETF消息,美国证券交易委员会已批准T. Rowe Price的多资产加密ETF,该ETF可能包括比特币、以太坊、...
7 真主党24小时内对以色列发动21次行动消息,黎巴嫩线小时内,其在黎巴嫩南部针对以色列士兵、军事装备和阵地进行了21次导弹、防...
8 谷歌计划用2000部旧Pixel提供50台服务器算消息,谷歌研究人员与加州大学圣迭戈分校团队正在探索手机集群计算,计划将2000部退役Pix...
9 Databricks开源元排布工具Omnigent,支持跨消息,Databricks开源的元排布工具Omnigent以Apache 2.0协议发布,支持跨Agent组合与安全管控。Omni...
10 查马斯·帕里哈皮蒂亚:AI禁令为云巨头提消息,知名风投家查马斯帕里哈皮蒂亚指出,白宫对大模型的出口禁令,实质上为传统云巨头...
成都来彰科技 蜀ICP备2025134723号-1
资讯来源互联网,如有版权问题请联系管理员删除。