跳到正文
热点事件持续更新

Rel-Bloom:多语言关系推理诊断基准

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

研究团队(Asgari 等)发布 Rel-Bloom 诊断基准,评估大语言模型基于上下文中关系知识的推理能力。基准由 30 个 Wikidata 关系生成 450 道多选题,覆盖六种语言和 Bloom 五个认知层级,另含两种真值条件。 团队测试了 43 个模型,在六种语言和两种多语言设置下共进行 226,800 次预测,并称从中得出三项主要发现。相关资源已公开。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月5日
  1. arXiv cs.AI
    多语言 LLM 如何基于上下文中的关系知识做推理:一项认知分级诊断分析

    研究者构建 Rel-Bloom 诊断基准,由 30 个 Wikidata 关系生成 450 道多选题,覆盖六个语言和 Bloom 五个认知层级,测试 43 个模型共 226,800 次预测。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。