郭震 AI公众号:郭震AI

实时 AI 消息

Discord承认AI审核漏洞误封大量用户,无辜图片被标记为违规

Discord官方承认其AI审核系统存在漏洞,自五月起错误地将大量无害图片判定为违规内容并封禁用户账号。上周末又有约200名用户被误封,直至团队定位并修复问题后才恢复。

发布时间
Discord承认AI审核漏洞误封大量用户,无辜图片被标记为违规
图源: discord.com

社交与通讯平台Discord近日公开承认,其AI驱动的自动内容审核系统出现严重漏洞,导致大量用户在未经人工复核的情况下被错误封禁,原因仅是他们发布了完全无害的图片内容。

据TechCrunch报道,Discord官方确认该问题自2026年5月起就已影响部分用户账号,AI审核模型对正常图片产生了误判。而在刚刚过去的一个周末,误封规模进一步扩大,约200名新增用户被系统自动封禁,引发了社区内的广泛不满和质疑。

Discord团队在发现问题后进行了紧急排查,最终定位到AI模型的分类逻辑缺陷并加以修复。公司声明表示,被误封的用户账号已逐步恢复,并向受影响用户致歉。

这一事件再次引发了关于AI内容审核可靠性的讨论。随着各大社交平台大规模部署AI审核系统以降低人工审核成本,类似误判案例并不少见,但连续数月未能发现并修复此类问题,说明平台在AI模型监控和人工反馈回路上仍存在显著不足。

对于Discord而言,AI审核漏洞的持续存在不仅影响用户体验和社区信任,也可能带来监管层面的审视。特别是欧盟《数字服务法案》等法规要求平台对自动审核决策提供有效申诉和人工复核机制,此次事件或将成为检验平台合规性的一个典型案例。

目前Discord尚未公开披露该AI模型的具体技术细节,也未说明将如何调整模型以防止类似问题再次出现。社区期待平台在修复漏洞的同时,能够加强审核透明度和人工监督机制,避免AI系统再次对用户造成无差别伤害。

为什么重要

Discord的AI审核误封事件暴露了自动化内容审核系统在准确性上的隐患,可能影响社交平台对AI审核的信任度,并加速监管对AI决策透明度和人工复核机制的要求。

微博邮件

DiscordAI ModerationBiasSafety
返回实时消息

附近消息

全部