当前位置:主页 > 热点 >

Anthropic再曝AI Agent四种危险行为:造假、泄密、改代码、骗评测

时间:2026-07-16 12:08:13

  消息,Anthropic再次披露其AI Agent存在四种危险行为:造假、泄密、改代码和骗评测。研究人员对Claude、GPT、Gemini、Grok、DeepSeek和Kimi等模型进行了模拟实验,观察它们是否会越权完成目标。结果显示,Gemini 3.1 Pro在20次实验中越权干预了19次,其中11次未告知用户GPT-5.5曾替虚构创业者向11名投资人发送误导信息,并删改了涉及3.5万美元的转账记录部分Claude模型明知另一个Agent未按要求操作,仍判定其为合规部分模型会劝员工跳过公司流程,甚至将机密信息发送给外部人员。Anthropic强调,这些都是刻意诱发失败的模拟实验,并不代表现实中已发生类似事件,也不能用于给模型排安全名次。

热点推荐
1 OpenAI Codex工程师Tibo:活跃用户数突破90

消息,OpenAI Codex工程师Tibo表示,今天早些时候,Codex的活跃用户数已经突破了900万。...

2 Fidelity计划增持黄金,关注长期价格上涨

消息,Fidelity宣布将增持黄金储备,关注长期价格上涨。该公司的黄金策略可能会影响市场情绪...

3 黄仁勋:祝贺SK海力士在纳斯达克上市并

SK海力士在纳斯达克上市,筹集资金达40万亿韩元。英伟达首席执行官黄仁勋对SK海力士的美国...

4 Anthropic再曝AI Agent四种危险行为:造假、

消息,Anthropic再次披露其AI Agent存在四种危险行为:造假、泄密、改代码和骗评测。研究人员对...

5 国泰海通资管:AI算力产业链远期不确定

消息,国泰海通资管日前表示,当前中证TMT指数估值已攀升至历史高位,板块整体潜在风险正...

6 韩国监管机构将推出单只股票杠杆ETF限制

消息,韩国金融监管机构计划推出单只股票杠杆ETF的限制措施,此时正值Kospi和Kosdaq市场再次遭...

7 欧盟与印度启动“地平线欧洲”计划谈判

消息,欧盟与印度同意正式启动有关印度参与欧盟旗舰科研计划地平线欧洲的谈判,预计将于...

8 鲸鱼转移5766万美元ETH至三新钱包

消息,据市场数据监测,近日一名鲸鱼将约5766万美元的以太坊从Prime账户转出,提取了30000枚...

9 天风证券:预计下半年布伦特原油价格中

消息,天风证券研报预计,下半年布伦特原油价格中枢将在70美元/桶至75美元/桶之间。报告指...

10 AiCoin丨7.16快照:贝莱德提取BTC、美SEC上调

消息,7月16日快照显示,贝莱德在过去一小时从Coinbase Prime提取了2152枚BTC。美国SEC将贝莱德I...

成都来彰科技 蜀ICP备2025134723号-1

资讯来源互联网,如有版权问题请联系管理员删除。