跳到正文
10月21日周三
  1. Hugging Face Daily Papers44

    RiseHarness 框架:自进化方法提升长时程终端 Agent 可靠性

    论文提出 RiseHarness,一个在模型权重固定的情况下迭代改进终端 agent harness 的框架。它以同配置下成功与失败的运行为切入点,结合轨迹与运行时监控的 harness 内部追踪,生成 Harness Handbook 定位跨任务的共性问题,并从其他 harness 框架检索相关实现作为设计参考,经行为检查与重复任务评估后保留有实测增益的版本进入下一轮迭代。

  2. Hugging Face Daily Papers41

    Specter:通过量化驱动的多步推测卸载加速 MoE 推理

    推理系统 Specter 将量化与推测解码、专家卸载结合,用量化轻量草稿模型预测未来专家激活,让运行时提前调度专家的搬运与执行,缓解 PCIe I/O 瓶颈。单请求推理下,Specter 的 TPOT 相比 SOTA 系统平均提速 1.50x,最高达 1.88x。该系统让内存受限的单 GPU MoE 推理在消费级硬件上更实用,代码已开源。

  3. The Information75

    DeepSeek 开源自研推理框架 DeepInfer

    DeepSeek 开源了用于运行自家模型的内部推理框架 DeepInfer。此举揭示了该中国 AI 开发商在大规模运行模型时实现高效率和低算力成本的部分技术细节,外界有望借助 DeepInfer 获益。

    推荐理由:DeepSeek 开源自用推理框架 DeepInfer,读者可以借此了解其大规模推理降本的内部做法。

  4. Hugging Face Blog71

    Hugging Face 推出 TorchTPU,让 PyTorch 原生支持 TPU

    Hugging Face 介绍 TorchTPU 这一 PyTorch 原生 TPU 后端,Transformers、Diffusers 和 Kernels 无需 torch_xla 即可原生运行在 TPU 上,模型只需 device_map="tpu" 即可加载。

    推荐理由:原文介绍了 TorchTPU 原生后端与安装方式,并给出 batch 64 下 21.5× 的解码加速等实测数据,读者可据此评估迁移成本。

10月20日周二
10月19日周一
10月17日周六
  1. Google Research64

    Google Research 发布 VERID 框架与闭环湿实验室智能体研究成果

    Google Research 发布三项研究,构建面向自主湿实验室的智能体基础模块。VERID 框架基于 PyLabRobot 提供实验室工作单元的语义数字孪生,支持实时 3D 状态追踪、虚拟试运行、硬件安全检查和视频与动作日志同步。

    推荐理由:原文给出 Google 让智能体在湿实验室自主做实验的三个研究项目与具体指标,读者可以了解真实实验反馈如何补足计算设计。

10月2日周五
  1. Google Research59

    Google Research 推出基于 TEE 的下一代联邦学习系统,Gboard 已部署

    Google Research 宣布下一代联邦学习系统,利用可信执行环境(TEE)提供可远程证明、可审计的数据匿名化保障,访问策略发布到公开透明日志 Rekor,KMS 与数据处理二进制可从开源代码复现构建。Gboard 已部署该系统,上线英语和日语下一词预测模型,隐私保障更强、精度更高;服务器端并行化把过去每次 1-2 个月的训练显著提速,客户端梯度计算转移到服务器也为训练更大模型铺路。