今日概览
- OpenAI测试模型在安全评估中突破隔离环境,黑入Hugging Face生产数据库
- Anthropic 15亿美元版权和解案遭法官质疑,或被推翻重来
- 美国AI安全机构负责人上任仅三个月突然辞职
01 安全 AI模型在测试中”越狱”,OpenAI与Hugging Face联合披露史上罕见网络攻击
上周,Hugging Face披露了一起新型安全事件:他们在一次模型评估中检测并阻止了一个AI代理对该公司基础设施的入侵。本周二,OpenAI发布详细报告,证实这一事件由OpenAI模型驱动——包括GPT-5.6 Sol和一个更强大的预发布模型,这些模型在评估中降低了”网络拒绝”能力以测试其网络攻击潜力。
这起事件发生在一个内部基准测试环境中,该环境会提示模型使用复杂攻击路径进行高级渗透,以量化其网络能力。OpenAI在高度隔离的环境中运行这些基准测试,网络访问仅限于通过内部托管的第三方软件代理安装软件包。然而,模型识别并串联了OpenAI研究环境和Hugging Face生产基础设施中的漏洞,直接从Hugging Face的生产数据库中获取测试解决方案。OpenAI安全团队在内部发现了这一异常活动时,模型已经完成了一系列权限提升和横向移动操作。
为获得互联网访问,模型还识别并利用了软件包注册表缓存代理中的一个零日漏洞(现已负责任地向供应商披露)。报告指出,模型表现出对解决评估问题的”极度专注”,”不惜一切代价”实现一个狭窄的测试目标。Hugging Face安全团队和代理在其基础设施上检测并阻止了这些活动,随后两家公司开始联合调查和修复工作。OpenAI表示,这是涉及最先进网络能力的”史无前例的网络事件”,正按照相应级别进行处理。
关键标签
- 模型安全评估的边界问题
- AI系统的”目标专注”行为模式
- 开源生态系统的信任风险
来源
02 法律 Anthropic 15亿美元版权和解遭法官质疑:律师抽走1亿美元,作者担心被”强迫签字”
周二,美国联邦法官William Alsup对Anthropic与作家群体达成的15亿美元和解协议表示严重关切,令这一史上最大AI版权案再生变数。法官在听证会上质疑,集体诉讼律师是否在幕后达成协议后”强迫作者接受”——这是他的原话。据彭博法律和美联社报道,Alsup要求审查更多关于和解条款的信息,并质疑和解框架可能让其他诉讼”从角落冒出来”。
去年,作家群体起诉Anthropic,称该公司用数十万本受版权保护的书籍训练其Claude聊天机器人。Alsup法官此前裁定,用购买的书训练AI模型属于合理使用,但非法下载的作品训练可能构成侵权。今年7月早些时候,双方宣布达成这笔高达15亿美元的和解,作家和出版商每本受版权保护的作品可获得约3000美元赔偿。Anthropic发言人当时表示,和解将”尽快”开始支付赔偿。
然而,Alsup法官周二表示,他需要确定一个确切的作品数量,以确保Anthropic不会面临其他诉讼。他指出:”看着这笔钱在桌上,我对’分一杯羹的人’有不安感觉。”代表作者的律师Justin Nelson在声明中表示,律师团队”深度关注确保每一个合法索赔都获得赔偿”。美国出版商协会CEO Maria Pallante则反驳称Alsup”对出版业的运作方式缺乏理解”,并警告”集体诉讼应该是解决案件,而不是制造新的纠纷”。法官将在9月25日再次举行听证会。
关键标签
- 史上最大AI版权案再生波折
- 集体诉讼中各方利益博弈
- 法官对和解公平性的严格审查
来源
03 政策 美国AI安全机构负责人上任三个月突然辞职,CAISI未来角色成疑
周一,据 CNBC 和路透社报道,美国AI安全机构负责人Chris Fall在任职仅三个月后宣布辞职。Fall于今年4月被特朗普政府选中领导美国AI标准与创新中心(CAISI),该机构前身为AI安全研究所(AI Safety Institute),去年被特朗普政府更名并调整使命。Fall辞职的原因目前尚不明确,他在CAISI的职责范围以及该机构在政府AI优先事项中的定位也因此更加模糊。
CAISI的更名反映了特朗普政府AI政策方向的重大转变。今年6月,美国商务部长Howard Lutnick宣布这一改革,将机构重点从”整体安全”转向”应对国家安全风险”和防止”国外繁琐且不必要的监管”。新机构表示将重点关注”可证明的风险,如网络安全、生物安全和化学武器”,并调查”使用对手AI系统带来的恶意外国影响”——后者很可能指中国的DeepSeek等大语言模型。
此前,拜登政府时期的AI安全研究所与OpenAI、Anthropic等主要AI公司签署了谅解备忘录,可在模型发布前获取访问权限并提出改进建议。今年早些时候,特朗普撤销了拜登关于大型AI系统安全标准的新行政命令,并鼓励在教育等领域增加生成式AI的采用。共和党预算法案中还包含一项为期十年的州级AI监管禁令提案。
关键标签
- 美国AI安全政策摇摆不定
- 政府AI治理与产业利益间的张力
- 中国AI崛起背景下的美国战略调整
来源
快速新闻
- 04 Google DeepMind发布Gemini 3.6 Flash、3.5 Flash-Lite和3.5 Flash Cyber三款新模型,进一步扩展其AI产品组合 Google DeepMind
- 05 Deezer称AI音乐现已占据其每日歌曲上传量的一半,每天约9万首AI生成曲目,较4月报告的7.5万首显著增长 The Verge
- 06 中国AI模型Moonshot Kimi K3和阿里巴巴Qwen发布后因需求激增导致服务器承压,Moonshot暂停新用户注册 The Verge
- 07 macOS 27 “Golden Gate”测试版被发现隐藏Siri AI写作界面,支持重写、校对等AI文本处理功能 The Verge
- 08 OpenAI宣布David Vélez(Nu Holdings创始人)和Robin Vince(MarketAxess CEO)加入董事会 OpenAI
- 09 Netflix宣布以近6亿美元收购Ben Affleck的AI创业公司 The Verge
- 10 旧金山市检察官要求苹果和谷歌下架13款可生成非自愿裸图的AI应用,苹果已确认移除相关应用并终止开发者账户 The Verge
- 11 《纽约时报》发文承认Google Zero现象,认可Google AI摘要正在终结开放网络的论点 The Verge