跳到正文
热点事件持续更新

发布SAGE-QA闭域问答评测框架

1 篇报道1 个报道来源53 分钟前更新

先了解这件事

AI 综述

SAGE-QA 的作者团队提出一个面向闭域问答的多层评测框架,并在 SQuAD 2.0 上对生成式大模型进行评测。该框架结合两个评分:基于参考答案的语义等价评分(SES)和基于段落的再验证评分(RVS)。 提出这一框架的动因是,传统 Exact Match 指标无法区分模型的同义改写与事实错误;SAGE-QA 旨在弥补这一缺陷。

AI 根据报道生成 · 31 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月14日
  1. arXiv cs.AI
    SAGE-QA:基于 SQuAD 2.0 的语义感知闭域问答评测框架

    SAGE-QA 是一个面向闭域问答的多层评测框架,结合基于参考答案的语义等价评分(SES)和基于段落的再验证评分(RVS),以弥补 Exact Match 无法区分同义改写与事实错误的缺陷。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。