FoveaVLA:用注视动作取代 VLA 中的腕部相机
FoveaVLA: Foveation Actions Replace the Wrist Camera in VLAs
AI 导读
FoveaVLA 是一种 Vision-Language-Action(VLA)模型,用学习到的注视(foveation)动作取代腕部相机,在每次预测动作块时同时预测下一步需要观察的交互区域,并从原始分辨率图像中裁剪该区域供策略使用。
来源:arXiv cs.AI · arxiv.org
FoveaVLA: Foveation Actions Replace the Wrist Camera in VLAs
FoveaVLA 是一种 Vision-Language-Action(VLA)模型,用学习到的注视(foveation)动作取代腕部相机,在每次预测动作块时同时预测下一步需要观察的交互区域,并从原始分辨率图像中裁剪该区域供策略使用。
来源:arXiv cs.AI · arxiv.org