实时 AI 消息
Irregular称AI模型测试逃逸源于人为配置错误,模型未绕过防护
安全公司Irregular联合创始人兼CEO Dan Lahav 11月3日在伦敦Bloomberg Tech活动上表示,此前Anthropic、OpenAI、Meta和谷歌的模型在其测试环境中“逃逸”并入侵企业系统,原因是安全控制配置不当的人为错误,而非模型突破防护。他称修复“其实非常直接”,问题在事发当天即已解决。
安全公司Irregular联合创始人兼首席执行官Dan Lahav 11月3日在伦敦举行的Bloomberg Tech活动上表示,此前多家前沿AI模型在Irregular测试环境中“逃逸”并入侵外部企业系统,根源是安全控制配置不当的人为错误,而不是模型绕过了防护。
据PYMNTS援引彭博报道,Lahav称这一问题的修复“其实非常直接”,并在事发当天完成。他强调,模型并没有绕过任何安全防护措施,问题出在本应到位的安全控制被错误配置。
这起风波已持续数月。Anthropic在7月30日的博客中称,公司在审查自身评估历史时发现三起独立事件,其模型分别访问了三家不同组织的系统。Anthropic表示,这项审查是与Irregular合作完成的,后者也在进行自己的调查。
OpenAI在8月4日的博客中说明,Irregular运行本应与互联网隔离的评估时,测试环境的配置错误让OpenAI模型接入了公共互联网。OpenAI同时强调,部分网络评估会故意采用包括降低防护在内的自定义配置,以衡量模型的底层能力,而非其在公开部署中的日常表现。
Meta在8月6日表示,其一款模型在网络安全测试中入侵了另一家公司,情形与Anthropic、OpenAI此前披露的事件类似,并将原因归结为Irregular的无意配置错误。谷歌则在9月18日《华尔街日报》的报道中称,其模型在5月由Irregular进行的网络安全能力测试中接入互联网,并入侵了三家公司。
一些网络安全专家此前表示,如果护栏配置得当,这些入侵本可避免。如今这一判断得到了测试服务商本人的公开背书,争议焦点也从“模型有多强”转向“测试环境有多严”。
这一归因的意义不止于一家供应商。第三方评估是部署前安全论证和前沿模型风险政策讨论的核心输入,其可信度取决于隔离措施是否真正生效。测试中降低防护可以是合理设计,但前提是外围隔离必须可靠。
接下来要看三件事:Irregular是否公布自身调查结论,评测沙箱是否形成更清晰的隔离与审计规范,以及模型厂商在涉及第三方系统的测试事件上如何披露。
为什么重要
把事件归因于配置而非模型能力,会削弱“前沿模型已具备自主突破沙箱能力”的叙事,但也会把压力转向第三方评测机构的流程规范与可审计性。
附近消息
全部11/04 05:43
Ballistic Ventures拟募4.9亿美元新基金,押注AI驱动的网络安全需求
据TechCrunch查阅美国SEC监管文件,前Kleiner Perkins合伙人Ted Schlein联合创办的网络安全风投Ballistic Ventures正寻求通过两只新基金募集4.9亿美元,其中第三期旗舰基金目标3.6亿美元,另设1.3亿美元的Fund B。此轮募资正值AI推高网络攻击复杂度、AI智能体为安全创业公司创造新机会之际。
11/04 05:06
沃尔玛升级AI购物代理,拍照即可生成购物清单
据PYMNTS报道,沃尔玛更新了其AI购物代理,用户现在可以把图片交给它,直接得到一份购物清单。这项改动把最自然的拍照动作接进购物流程,也把“买什么”的决定权更多地留在零售商自己的入口里。
11/04 04:25
苹果在年度报告中标注AI智能体风险:法律与安全敞口正在扩大
苹果在最新年度报告中把AI智能体带来的法律与安全风险纳入正式披露,提示代理式AI正在扩大公司的责任边界。这一表述出现在面向投资者的申报文件中,意味着平台厂商开始把智能体的实际行为当作实质性经营风险对待。
11/04 04:01
马斯克称Grok Bot成本“不可持续”,OpenAI承认Dots“计算密集”
据Fortune报道,马斯克称Grok Bot的成本“不可持续地高”,OpenAI也承认Dots“计算密集”。两家公司公开谈论推理成本,显示规模化AI产品的单位经济性已成为无法回避的问题。