跳到正文
arXiv cs.AI· David Fraile Navarro, Jialei Sheng, Farah Magrabi, Enrico Coiera·· 1 天前AI 评分58

arXiv 论文:评测格式而非模型能力主导消费级健康 AI 分诊错误率

Evaluation format, not only model capability, shapes measured triage failure in consumer health AI

AI 导读

Macquarie 大学等机构研究者在 arXiv 发表论文,质疑此前 Nature Medicine 关于 ChatGPT Health 漏诊 51.6% 急症的研究结论,认为该错误率很大程度是评测协议的产物而非模型能力问题。

来源:arXiv cs.AI · arxiv.org