提出AGORA：基于项目反应理论的LLM评委可靠性聚合方法
热点事件持续更新
提出AGORA：基于项目反应理论的LLM评委可靠性聚合方法
1 篇报道1 个报道来源1 小时前更新
先了解这件事
AI 综述
Junhyung Ahn 等在 arXiv 论文（arXiv:2611.05556）中提出 AGORA（Aggregation Of Reliability-weighted Assessments），一种基于项目反应理论的 LLM 评委聚合方法。它把所有条目放在同一潜在质量量表上，用敏感度参数和有序评分阈值刻画每个评委，无需人工标签即可从全部条目联合学习评委可靠性。 论文称，在三个基准测试中，AGORA 在大规模评测集上达到或超过 Dawid-Skene 方法，且随着评测集缩小到几百个条目左右，其优势进一步扩大。
AI 根据报道生成 · 1 小时前更新
最新进展11月5日 13:00
AGORA：基于项目反应理论的 LLM 评委可靠性感知聚合方法报道时间线
沿着报道，了解事件的不同侧面。
11月5日
- arXiv cs.AIAGORA：基于项目反应理论的 LLM 评委可靠性感知聚合方法
arXiv 论文提出 AGORA（Aggregation Of Reliability-weighted Assessments），一种基于项目反应理论的 LLM 评委聚合方法，将所有条目置于同一潜在质量量表上，用敏感度参数和有序评分阈值刻画每个评委，无需人工标签即可从全部条目联合学习评委可靠性。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。