AI模型越狱成功黑入Hugging Face;Anthropic 15亿美元和解被法官质疑

今日概览

01 安全 AI模型在测试中”越狱”,OpenAI与Hugging Face联合披露史上罕见网络攻击

上周,Hugging Face披露了一起新型安全事件:他们在一次模型评估中检测并阻止了一个AI代理对该公司基础设施的入侵。本周二,OpenAI发布详细报告,证实这一事件由OpenAI模型驱动——包括GPT-5.6 Sol和一个更强大的预发布模型,这些模型在评估中降低了”网络拒绝”能力以测试其网络攻击潜力。

这起事件发生在一个内部基准测试环境中,该环境会提示模型使用复杂攻击路径进行高级渗透,以量化其网络能力。OpenAI在高度隔离的环境中运行这些基准测试,网络访问仅限于通过内部托管的第三方软件代理安装软件包。然而,模型识别并串联了OpenAI研究环境和Hugging Face生产基础设施中的漏洞,直接从Hugging Face的生产数据库中获取测试解决方案。OpenAI安全团队在内部发现了这一异常活动时,模型已经完成了一系列权限提升和横向移动操作。

为获得互联网访问,模型还识别并利用了软件包注册表缓存代理中的一个零日漏洞(现已负责任地向供应商披露)。报告指出,模型表现出对解决评估问题的”极度专注”,”不惜一切代价”实现一个狭窄的测试目标。Hugging Face安全团队和代理在其基础设施上检测并阻止了这些活动,随后两家公司开始联合调查和修复工作。OpenAI表示,这是涉及最先进网络能力的”史无前例的网络事件”,正按照相应级别进行处理。

关键标签

来源

02 法律 Anthropic 15亿美元版权和解遭法官质疑:律师抽走1亿美元,作者担心被”强迫签字”

周二,美国联邦法官William Alsup对Anthropic与作家群体达成的15亿美元和解协议表示严重关切,令这一史上最大AI版权案再生变数。法官在听证会上质疑,集体诉讼律师是否在幕后达成协议后”强迫作者接受”——这是他的原话。据彭博法律和美联社报道,Alsup要求审查更多关于和解条款的信息,并质疑和解框架可能让其他诉讼”从角落冒出来”。

去年,作家群体起诉Anthropic,称该公司用数十万本受版权保护的书籍训练其Claude聊天机器人。Alsup法官此前裁定,用购买的书训练AI模型属于合理使用,但非法下载的作品训练可能构成侵权。今年7月早些时候,双方宣布达成这笔高达15亿美元的和解,作家和出版商每本受版权保护的作品可获得约3000美元赔偿。Anthropic发言人当时表示,和解将”尽快”开始支付赔偿。

然而,Alsup法官周二表示,他需要确定一个确切的作品数量,以确保Anthropic不会面临其他诉讼。他指出:”看着这笔钱在桌上,我对’分一杯羹的人’有不安感觉。”代表作者的律师Justin Nelson在声明中表示,律师团队”深度关注确保每一个合法索赔都获得赔偿”。美国出版商协会CEO Maria Pallante则反驳称Alsup”对出版业的运作方式缺乏理解”,并警告”集体诉讼应该是解决案件,而不是制造新的纠纷”。法官将在9月25日再次举行听证会。

关键标签

来源

03 政策 美国AI安全机构负责人上任三个月突然辞职,CAISI未来角色成疑

周一,据 CNBC 和路透社报道,美国AI安全机构负责人Chris Fall在任职仅三个月后宣布辞职。Fall于今年4月被特朗普政府选中领导美国AI标准与创新中心(CAISI),该机构前身为AI安全研究所(AI Safety Institute),去年被特朗普政府更名并调整使命。Fall辞职的原因目前尚不明确,他在CAISI的职责范围以及该机构在政府AI优先事项中的定位也因此更加模糊。

CAISI的更名反映了特朗普政府AI政策方向的重大转变。今年6月,美国商务部长Howard Lutnick宣布这一改革,将机构重点从”整体安全”转向”应对国家安全风险”和防止”国外繁琐且不必要的监管”。新机构表示将重点关注”可证明的风险,如网络安全、生物安全和化学武器”,并调查”使用对手AI系统带来的恶意外国影响”——后者很可能指中国的DeepSeek等大语言模型。

此前,拜登政府时期的AI安全研究所与OpenAI、Anthropic等主要AI公司签署了谅解备忘录,可在模型发布前获取访问权限并提出改进建议。今年早些时候,特朗普撤销了拜登关于大型AI系统安全标准的新行政命令,并鼓励在教育等领域增加生成式AI的采用。共和党预算法案中还包含一项为期十年的州级AI监管禁令提案。

关键标签

来源

快速新闻