跳到正文
@bboczeng· 勃勃OC·· 2 小时前AI 评分28

Astra 被称可从零手写权重,效果超其他 AI 训练技术?网友惊叹梯度训练或被颠覆

什么?几天没看新闻,AI现在都可以直接修改、手写权重了,效果比1亿步PPO训练的还要好? 这意思是,以后都不需要梯度训练新模型了,直接让大语言模型帮你改 我的...

AI 导读

Nick Dobos 发文称 Astra 可以从零手写新权重,效果优于其他 AI 训练技术,引发“以后不再需要梯度训练新模型”的讨论。该消息还提到通过循环 bug 修复来改进数学能力很酷,但他指出调试和修复权重相比生成全新权重仍有局限,并强调如果这一方法确实可行,意义将十分重大。

来源:@bboczeng · x.com