郭震 AI公众号:郭震AI

实时 AI 消息

Anthropic 修订版 S-1A 罕见提示:公司可能即将触及“递归自我改进”门槛

Anthropic 在 11 月 2 日的修订版 S-1A 风险因素章节中新增表述,称依据内部估算与对未来模型的预期,公司可能“即将”满足其《负责任扩展政策》对“由 AI 导致的显著加速进展”的定义。文件同时强调现有模型均未被认定越过该阈值,并承诺在可预见未来仍将人类保留在前沿模型研发环节。

发布时间
Anthropic 修订版 S-1A 罕见提示:公司可能即将触及“递归自我改进”门槛
图源: techcrunch.com

11月2日,Anthropic 在修订版 S-1A 文件中更新了风险因素章节,把“递归自我改进”(recursive self-improvement,简称 RSI)写成了一个需要向投资者说明的具体风险。TechCrunch 当天报道指出,这份文件最受关注的是更新的财务数据——收入在飙升,支出同样在膨胀——但真正值得注意的是细则里的这段新表述。

RSI 指的是 AI 在训练自身这件事上变得足够强,从而引发能力的急剧加速。在担忧者看来,它意味着模型可能迭代到超出人类控制的范围,并在追求目标时对造成的损害无动于衷;在乐观者看来,它代表一种难以想象的生产力工具,可以加速科学发现。同一项能力,被两种叙事同时争夺。

文件新增了两层意思。第一,Anthropic 承认自己已经在用 AI 开发新模型,而这些模型带来的能力跃升,公司当时并没有识别出来。第二,公司表示,依据内部估算以及对未来模型的预期——而不是现有模型的表现——它可能“即将”满足其《负责任扩展政策》(Responsible Scaling Policy)中“由 AI 导致的显著加速进展”这一定义。

原文写得很直接:公司称其内部估算与对未来模型的预期表明,可能很快就会触及 RSP 中“dramatically accelerated progress attributable to AI”的门槛,同时强调目前尚未把任何现有模型认定为超过该阈值,相关底层数据仍在评估之中。

这份披露的另一半是约束。Anthropic 在文件中承诺,在可预见的未来仍会把人类留在研发流程中,并表示不预期能够安全地让 Claude 在缺乏有意义的人类监督或理解的情况下,完全自主地设计并构建下一代前沿模型——即便这在技术上变得可行。公司还称,正在考虑更新 RSP,以在内部保持人类对前沿模型开发的控制。

对于长期跟踪 AI 安全讨论的人来说,这段话的分量在于它出自一份上市文件,而不是一篇博客。S-1 类文件既是披露,也是营销,怀疑者完全可以说“我们快要造出能改造自己的模型”同样是一种估值叙事。但文件里同时承认了“过去未能及时识别能力跃升”这一事实,这让它更像一次被动交底,而不只是主动宣传。

把两件事放在一起看会更清楚:Anthropic 一方面说现有模型都还没越过门槛,另一方面又说未来模型的预期表现可能让公司很快越线。这实际上把 RSI 从“行业口头禅”变成了一个有内部定义、有触发条件、需要持续向市场汇报的运营指标。

接下来值得观察的有三点:修订后的 RSP 究竟会加入哪些具体条款,IPO 进程中美股投资者与监管方如何解读这类风险表述,以及当公司真的认定某个模型越过阈值时,会以什么方式、在多长时间内对外披露。对 Anthropic 而言,这份文件已经把答案的一部分提前写在了纸上。

为什么重要

这是前沿实验室首次把 RSI 作为一项带有内部定义和触发条件的风险,写进面向公开市场投资者的文件,意味着 AI 自我改进的讨论开始进入披露与问责框架。若后续 RSP 修订落地,它也可能成为其他实验室 IPO 时的参照模板。

微博邮件

AnthropicAI SafetyRSI
返回实时消息

附近消息

全部

11/03 05:22

Stirling:在本地运行 Llama、DeepSeek 和 Qwen——开发者的梦想编辑器 quasa.io

据 news.google.com 消息,Stirling:在本地运行 Llama、DeepSeek 和 Qwen——开发者的梦想编辑器 quasa.io。Stirling:在本地运行 Llama、DeepSeek 和 Qwen——开发者的梦想编辑器 quasa.io

11/03 07:13

Trajectory 完成 4500 万美元 A 轮,要让非技术专家也能训练专属模型

成立约一年的初创公司 Trajectory 宣布完成 4500 万美元 A 轮融资,估值达 3 亿美元,由红杉资本领投,英伟达、Bessemer 与 Bain Capital Ventures 参投。该公司通过持续学习平台让律师、医生等业务专家用反馈直接改进开源模型,试图把昂贵的后训练工作从研究团队手中解放出来。

11/03 04:55

韩国 Liner 开设 40 岁以上专场 AI Agent 黑客松,奖金约 6,700 美元

韩国公司 Liner 开放了一场面向 40 岁以上专业人士的 AI Agent 黑客松,总奖金约 6,700 美元。活动的特别之处在于年龄门槛而非奖金规模,它把参赛资格交给了有行业经验的资深从业者,而不是通常被 AI 竞赛追逐的年轻开发者。

11/03 07:48

OpenAI 聘请前美国国防部长马克·埃斯珀,扩大军事 AI 业务

据 Crypto Briefing 报道,OpenAI 已聘请美国前国防部长马克·埃斯珀,以扩大公司在军事领域的 AI 业务。这一人事动作意味着前沿模型公司与国防体系的绑定进一步加深,也让外界更关注其模型在军事场景中的使用边界。