伊利诺伊大学团队发布安全代码评审基准SecPRBench
热点事件持续更新
伊利诺伊大学团队发布安全代码评审基准SecPRBench
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
伊利诺伊大学团队(Yihan Yang 等)在 arXiv 发布 SecPRBench,称为首个基于经过验证的真实漏洞引入提交来评估智能体安全代码审查的基准。基准通过自动化流水线从 Firefox、V8、OpenSSL 等九个关键系统采集了 265 个任务,并采用 LLM-as-a-judge 对命中真实漏洞的发现判分。 在八款前沿模型上的测试中,召回率介于 32.5% 到 78.1% 之间,Grok 4.6 和 GPT-6 sol 排名最高。
AI 根据报道生成 · 1 小时前更新
最新进展10月27日 12:00
SecPRBench 提出基于真实漏洞提交的智能体安全代码审查基准报道时间线
沿着报道,了解事件的不同侧面。
10月27日
- arXiv cs.AISecPRBench 提出基于真实漏洞提交的智能体安全代码审查基准
伊利诺伊大学团队(Yihan Yang 等)发布 SecPRBench,首个在经过验证的真实世界引入漏洞提交上评估智能体安全代码审查的基准,通过自动化流水线从 Firefox、V8、OpenSSL 等九个关键系统采集并验证了 265 个任务,并采用 LLM-as-a-judge 判分。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。