郭震 AI公众号:郭震AI

实时 AI 消息

BotGauge 发布 AI Agent 红队测试平台,内置 200 余种攻击策略

BotGauge AI 宣布推出 AI Agent 红队测试平台,把攻击、追踪、评估与治理整合进同一套系统,覆盖 Agent 从开发到生产的全过程。平台内置 200 余种对抗性与真实场景攻击策略,并可通过轻量 SDK 接入 OpenAI、LangChain、CrewAI 等现有技术栈。

发布时间

BotGauge AI 宣布推出其 AI Agent 红队测试平台,把攻击、追踪、评估与治理放进同一套系统,覆盖 Agent 从开发到生产的整个周期。这一消息由 VMblog 于 10 月 28 日发布。

平台的核心卖点是攻击库:内置 200 余种对抗性与真实场景红队策略,覆盖提示词注入、策略绕过、工具滥用与多轮操纵,并支持自定义策略以及企业特定的攻击场景。

当某次攻击暴露出失败时,平台会追踪到具体的提示词、工具调用、上下文与执行路径,然后把这次发现转化为一条评估用例,在之后的每个版本上重复运行,避免同一个缺陷被重复发布。

三项能力被拆得很清楚:红队测试覆盖单轮与多轮攻击;追踪提供提示词、模型响应、上下文、工具调用和执行路径的可见性;评估层则使用基于大模型的评估器,衡量目标完成度、准确性与策略遵从度,让团队可以跨版本跟踪 Agent 的行为变化。

联合创始人兼 CEO Pramin Pradeep 在发布中解释了这个问题的性质:Agent 的失败方式与传统软件不同,模型、提示词或工具的一点点改动,就可能让 Agent 走上没人预料到的路径。按他的说法,多数团队是在上线之后才发现这些失败。

兼容性方面,平台通过轻量 SDK 接入 OpenAI、Anthropic、LangChain、LangGraph、LlamaIndex、CrewAI 和 AutoGen 等现有技术栈。平台具备 SOC 2 Type II 认证,支持 SSO/SAML 与细粒度访问控制。

这类工具的时机并非偶然。企业正在把 Agent 放进决策与执行环节,而传统软件测试跟不上这些系统的复杂度,真实世界的事件也说明小漏洞可以很快演变成安全问题。红队测试加上回归评估,正在成为 Agent 上生产前的一道常规关卡。

真正值得观察的是这个闭环能否成立。把每次发现固化为回归评估,意味着测试资产会随版本累积,这对同时使用多个 Agent 框架的团队尤其关键。接下来要看攻击库的更新频率、与企业现有可观测性体系的对接深度,以及第三方能否独立复核它的评估结论。

为什么重要

把红队发现转化为版本间回归评估,实际是在为 Agent 建立可持续的测试资产;如果这一闭环被广泛采用,Agent 上线的安全门槛会从一次性渗透测试转向持续评估。

微博邮件

BotGauge红队测试AI Agent 安全
返回实时消息

附近消息

全部

10/28 21:53

Cognitum One 开源 MetaHarness,做可定制、可治理的智能体外壳工厂

10月28日,Cognitum One 发布开源项目 MetaHarness,把自己定位为面向品牌化、可治理 AI 智能体 harness 的“工厂”,并与 GitHub Universe 2026 大会同期公布。它试图把模型之上连接工具、约束权限、记录行为的重复工程沉淀为可配置、可派生的基础设施。

10/28 22:57

扩散智能发布 Clover-35B:扩散语言模型开始接手 Agent 任务

10月28日,扩散智能发布扩散语言模型 Clover-35B-A3B-Preview,以350亿总参数、约30亿激活参数的 MoE 架构进入编程与 Agent 任务。在网页 Agent 评测 WindTunnel 的49个任务上,其中位执行时间1.52秒,约为 Jev 与 Mercury 2.5 组合3.21秒的一半,成功率98.6%对95.9%。

10/28 22:58

英伟达开源 Nemotron 3.5 Transcribe:一个可提示的多语种转写模型

10月28日,英伟达在 Hugging Face 发布开源权重模型 Nemotron 3.5 Transcribe,把转写、说话人分离、翻译和音频问答合并进同一个检查点,支持40种语言转写、最长一小时录音与8位说话人。同步开放的 Granary v2 数据管线与微调工具让开发者可用自然语言提示或领域数据定制输出,官方称其在英语开源 ASR 榜单位列第一。

10/28 21:03

Anthropic 警告:AI 责任风险可能超出保险市场承保能力

据保险行业媒体 Program Business 报道,Anthropic 警告称 AI 责任风险可能超出保险市场的承保能力。这一表态把企业级 AI 部署中长期被搁置的责任归属与保单覆盖问题,推到了商业化讨论的前台。