实时 AI 消息
纽约市议会 AI 听证会:业界人士警告“人类更可能失去控制”
纽约市议会举行听证会,前 Anthropic、OpenAI 与 Google DeepMind 员工形容头部 AI 公司文化鲁莽,并警告人类更可能失去对 AI 的控制。与此同时,代表 OpenAI、Anthropic、Google 和 Meta 的员工小组强调公司聚焦安全,市议会正审议多项 AI 监管提案。
纽约市的决策者本周一听到了关于人工智能的严厉警告。在一场市议会听证会上,AI 业界人士表示这项技术可能危及人类,并呼吁加强监管。这场作证发生在地方政府开始填补联邦监管空白之际。
多名近期从 Anthropic、OpenAI 和 Google DeepMind 离职的员工在听证会上形容,头部 AI 公司存在一种“鲁莽的文化”,它们正在竞赛式地打造自己并不懂得如何控制的技术。已成为监管倡导者代表人物的前 Anthropic 工程师 Jacob Coxon 说:“这些公司以一种创业心态运作:快速行动、打破常规、之后再修补。这对一个分享照片的应用可行,但用来打造史上最强大的技术则行不通。”
Coxon 表示 AI 可能带来巨大好处,但警告说,如果没有透明度和安全防护,事态更可能失控。“按照当前的路径,我认为人类更可能失去对这些 AI 的控制,甚至可能以人类灭绝告终,”他在听证会上说。
这背后是一个各州和城市正试图填补的政策真空。特朗普政府对 AI 采取被动态度,国会也迟迟未有行动;总统把对 AI 的担忧称为“骗局”,并在上月底签署了一份协议,列出企业自愿采取的步骤,基本上让企业自我监管。
一个由 AI 公司员工组成的小组也到场作证,他们分别代表 OpenAI、Anthropic、Google 和 Meta,向官员表示其系统已在改善人们的日常生活,并强调公司高度聚焦安全。Anthropic 和 OpenAI 都说过其先进产品需要被监管,两家公司的代表也对市议会的一些建议表达了开放态度。
OpenAI 的 Morgan Dwyer 说:“我认同你们确保技术安全发展、并让其收益被广泛分享的承诺。”当议长 Julie Menin 要求每位代表量化最坏情况下的灾难性风险时,Dwyer 回答:“我不知道——我也不认为这取决于它是 1%、10% 还是 20%……这些水平都完全不可接受。”
Menin 抨击这一回答“至少可以说是轻率的”。市议会正在考虑多项 AI 监管提案,包括要求企业披露 AI 工具的相关信息、要求在城市中使用的 AI 系统获得第三方批准,以及让举报人获得 AI 公司违法罚款的一部分。纽约州州长 Kathy Hochul 也已推动针对 AI 的申报与透明度标准,其他州的州长也在跟进。
Anthropic 的 Logan Graham 告诉市议会,公司欢迎“明智的监管”,州和地方政府在制定框架方面可以发挥作用:“AI 强大到一旦做错就会带来真实的后果,对个人、机构以及公众信任都是如此,”他说。
为什么重要
这场听证会显示,在联邦层面进展有限的情况下,州与城市正在成为 AI 安全监管的先行者;Anthropic、OpenAI 等公司一边强调安全承诺,一边面对监管者对其回应是否足够具体的质疑。
附近消息
全部10/06 06:39
首搭豆包座舱助手,荣威家越 07 小订突破三万
据太平洋汽车网报道,荣威家越 07 成为首款搭载豆包座舱助手的量产车型,其小订数量已突破三万。这条消息把大模型座舱助手推进到量产车型的实际销售环节,而不只是一次概念演示。
10/06 04:36
OpenAI 将在欧盟为 ChatGPT 文本加入隐形水印
OpenAI 宣布,将在欧盟范围内为 ChatGPT 与 Codex 生成的文本加入隐形水印,以满足《欧盟人工智能法案》的透明度要求。水印会在未来数周内先在欧盟上线,编辑可以削弱其可检测性,因此 OpenAI 目前只向经过审核的研究人员开放检测器。
10/06 04:36
Meta 发布 Muse Gadgets SDK:给 Muse 接上屏幕、按键和家里的设备
Meta 推出了 Muse Gadgets SDK,开发者可以借此打造围绕 Muse AI 运行的自定义硬件,为设备接上屏幕、按键,并连接家中的其他设备。这是 Meta 把 Muse 从软件助手延伸到第三方硬件生态的一步。
10/06 04:15
The Next Web:OpenAI 自研模型重塑其 Jalapeño 芯片,部分改动难以解释
据 The Next Web 报道,OpenAI 的模型被用于重塑其 Jalapeño 芯片,但其中一些改动连公司自身也难以完全解释。这一细节说明 AI 正在进入芯片设计环节,同时也暴露出可解释性上的缺口。