跳到正文
热点事件持续更新

发布SentryBench评估工具调用智能体对抗鲁棒性

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

三位作者发布SentryBench基准,用于评估工具调用LLM智能体在公共安全场景中的对抗鲁棒性,结论是该基准从攻击成功、过度拒绝和过度反应三方面联合打分,兼顾成本敏感的双向风险。 其场景基于真实紧急呼叫记录、灾害消息和真实的注入/越狱载荷,过度拒绝指漏掉真实紧急事件,过度反应指采取无依据的行动。

AI 根据报道生成 · 49 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月27日
  1. arXiv cs.AI
    SentryBench 发布:评估工具调用 LLM 智能体在公共安全场景中的对抗鲁棒性

    三位作者发布 SentryBench,一个面向公共安全部署的成本敏感基准,从攻击成功、过度拒绝(漏掉真实紧急事件)和过度反应三方面联合评估工具调用 LLM 智能体,场景基于真实紧急呼叫记录、灾害消息和真实注入/越狱载荷。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。