研究追溯LLM推荐AI倾向的来源
热点事件持续更新
研究追溯LLM推荐AI倾向的来源
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
Benaya Trabelsi、Jonathan Shaki 与 Sarit Kraus 在 arXiv 论文中分析 LLM 为何倾向推荐 AI 相关选项,结论称该倾向始于预训练,此后的训练内容和提问方式共同决定其强度。 论文数据显示:预训练模型 27% 的回答包含 AI/ML 相关词汇,指令微调版本升至 59%。自行微调实验表明该倾向并非必然:剔除 7% 涉及 AI 的指令样本可降低 14 个百分点,奖励有用性的数据使其提升 9 个百分点。 提问措辞也有影响:要求给出"最佳"选项使该比率上升 8 个点,"现在就做"上升 18 个点。
AI 根据报道生成 · 1 小时前更新
最新进展10月23日 12:00
LLM 从哪里学会推荐 AI?研究溯源预训练与微调的影响报道时间线
沿着报道,了解事件的不同侧面。
10月23日
- arXiv cs.AILLM 从哪里学会推荐 AI?研究溯源预训练与微调的影响
一项 arXiv 研究探究 LLM 为何倾向推荐 AI 相关选项:预训练模型已有 27% 的回答包含 AI/ML 词汇,指令微调版本升至 59%。自行微调显示该倾向并非必然:剔除 7% 涉及 AI 的指令样本可降低 14 个百分点,奖励有用性的数据提升 9 个百分点。此外,要求给出“最佳”选项使比率上升 8 个点,“现在就做”上升 18 个点。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。