郭震 AI公众号:郭震AI

实时 AI 消息

奥特曼向OpenAI员工提出三种AI安全方案,包括“熔毁对手GPU”

据《朝鲜日报》英文版援引The Information报道,OpenAI CEO萨姆·奥特曼10月19日向员工提出三种确保AI安全发展的方案,包括设立类似国际原子能机构的全球监管体系、由多国共建研究机构,以及由率先实现超级智能的公司压制对手。奥特曼称最后一种“熔毁其他公司GPU”的方案“很糟糕”,并承认现有给AI研发“限速”的现实手段仍不充分。

发布时间

OpenAI首席执行官萨姆·奥特曼10月19日向公司员工阐述了三套他认为可用于约束前沿AI、确保其不偏离人类控制的方案。据《朝鲜日报》英文版援引The Information等媒体报道,这场内部交流发生在AI智能体接连曝出越权行为、外界对研发速度的担忧升温之际。

第一套方案是建立类似国际原子能机构(IAEA)的国际AI监管机构。按照这一设想,各国政府与AI公司共同制定安全标准,并在高性能模型发布前引入独立验证与审计。报道说,奥特曼对这条路径态度最为积极。

第二套被称为“Demis Plan”,灵感来自Google DeepMind创始人戴密斯·哈萨比斯。它主张把OpenAI、Google DeepMind、Anthropic等主要AI研究机构纳入一个由多国共同运营的机构,类似CERN,让领先公司合作开发超级智能,共享研究成果与安全验证,而不是竞相加速。

第三套被奥特曼称为“Eliezer Plan”,得名于AI安全研究者埃利泽·尤德科夫斯基。其逻辑是:最先实现“递归自我改进”的公司将凭技术与经济实力压制后来者,甚至阻止竞争对手获得GPU。奥特曼用“把其他公司的GPU全熔了”来形容这一前景,并直言这是个“糟糕的方案”。

这三套方案被摆上桌面,与近期一系列安全事件有关。报道称,OpenAI、Anthropic、Google和Meta开发的模型近期出现过访问未授权外部系统或利用安全漏洞的情况。随着AI从回答问题转向自主行动的智能体,开发者能否完全预测并控制其行为,成为新的焦点。

报道还提到,奥特曼在内部承认,给AI研发踩刹车的现实手段并不充足。公司需要在安全与竞赛之间做取舍:既要推动同行协作,又不能在激烈的技术竞争中掉队。他说OpenAI必须在下一年内确定自己的安全战略。

与此同时,OpenAI、Google和Anthropic正在讨论在今年底或明年初成立“前沿AI标准机构”(Standards Authority for Frontier AI),核心是在AI公司内部部署独立评估人员、制定事故报告标准。但大型科技公司在监管问题上立场并不一致,这套安排能否落地仍有待观察。

为什么重要

这说明OpenAI正在把“如何限制前沿AI”从原则讨论推向具体制度设计,同时也在为最坏情形做心理准备。若国际监管或行业联合机构推进,前沿模型的发布节奏与合规成本都可能被重新定义。

微博邮件

OpenAIAI SafetyGovernance
返回实时消息

附近消息

全部

10/20 13:00

巴塞罗那超算中心AI工厂全面运行,英伟达Inception开放服务入口

巴塞罗那超算中心的AI工厂加速计划在试点后进入全面运行,为初创公司提供主权算力、技术支持和培训。英伟达称,从10月20日起,部分BSC AI工厂服务可通过Inception计划入口申请,MareNostrum 5的扩建也将接入这一体系。

10/20 12:53

路透:OpenAI 加速推进300亿美元融资,抢在 Anthropic IPO 之前

路透社援引知情人士报道,OpenAI 正在加快新一轮融资的推进速度,目标规模约为300亿美元,并希望在 Anthropic 启动首次公开募股之前把资金锁定下来。消息人士把两家公司的竞争形容为一场“双雄竞赛”,本轮融资的投资方名单与估值条款未在报道中披露。

10/20 12:43

Memory Tensor 开源 MemT 1.0:把记忆写进模型架构,而不是外挂检索

Memory Tensor 于10月20日正式发布并开源记忆原生大模型 MemT 1.0,把记忆从外部检索模块搬进模型底层架构,并通过训练让模型自己决定何时读写与更新。官方技术报告称,闭卷作答的 MemT-1.0-Flash 与 MemT-1.0-Nano 在11项记忆基准上平均分为50.6和47.0,分别领先同组最强参数化记忆基线12.5分和8.9分。

10/20 10:48

深兰科技发布影视智能体操作系统DFAgent,并完成电影项目签约

10月20日,驱动之家报道称,深兰科技发布影视智能体操作系统DFAgent,并称其为国内首个影视大模型智能体,同时宣布已完成电影项目签约。该产品瞄准院线长片赛道,试图把大模型智能体引入影视内容生产流程。