arXiv cs.AI· Reem Alzahrani, Bushra Bin Hemid, Hassan Alshanqiti, Zaid Alyafeai, Paul Gavrikov, Bernard Ghanem, Abdelrahman Eldesokey·· 1 天前AI 评分47
CounterCount：诊断视觉语言模型计数属性时的知识偏见
CounterCount: Diagnosing Knowledge Bias in How Vision-Language Models Count Attributes
AI 导读
研究者推出诊断数据集 CounterCount，用包含非典型计数的反事实图像（如四耳兔子）测试 16 个 VLM 的属性计数能力。人类两类图像准确率达 98.9% 和 97.5%，而 16 个模型（14 个开源、2 个闭源）在事实图像上平均准确率 91.6%，反事实图像降至 49.5%，多数错误与常识计数一致，暴露知识先验偏见。
来源：arXiv cs.AI · arxiv.org