跳转到正文
登录
← 开发动态

SLA 在机器人预训练阶段学习空间信息

方法用三维感知模型指导机器人策略学习,部署时沿用原有推理结构。

GETAI.APParXiv查看原文 ↗
SLA 项目真实机器人抓取水果的官方演示截图

11 月 5 日提交的 SLA 预印本提出在视觉、语言与动作模型的持续预训练中加入三维空间监督。训练时,机器人策略既学习预测动作,也尝试让中间视觉特征对齐一个固定的三维感知模型。

方法利用不同机器人数据中已有的 RGB、深度或相机标定信息。论文称额外组件仅在训练时使用,部署时可保留原策略的推理结构。

来源:arXiv。

演示截图:SLA 研究团队。截自官方演示视频。

登录

还没有账号?