跳到正文
热点事件持续更新

研究者提出RLSF自反馈强化学习后训练方法

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

Carel van Niekerk 等研究者发布论文,提出自我反馈强化学习(RLSF)后训练方法:用模型自身置信度作为自生成奖励。该方法从冻结的 LLM 生成多条思维链解码路径,按答案置信度排序构建合成偏好,再经标准偏好优化微调。据论文称,该方法无需人工标注、标准答案或外部奖励,同时改善概率校准与逐步推理,在算术推理和选择题问答上取得提升。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月6日
  1. arXiv cs.AI
    基于自我反馈强化学习(RLSF)的后训练方法提升大语言模型校准与推理

    研究者提出自我反馈强化学习 RLSF,一种利用模型内在置信度作为自生成奖励的后训练方法。该方法从冻结的 LLM 生成多条 CoT 解码路径,按答案置信度排序构建合成偏好,再通过标准偏好优化微调,无需人工标注、标准答案或外部奖励。RLSF 同时改善概率校准和逐步推理,在算术推理与选择题问答上取得提升。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。