具身智能新手名词表English

RoboGen

RoboGen: Towards Unleashing Infinite Data for Automated Robot Learning via Generative Simulation进阶

让大模型自动出题、搭仿真场景并学会技能的生成式仿真框架。

RoboGen 是 CMU、MIT、清华叉院、UMass Amherst 等机构 2023 年 11 月提出的机器人学习框架,发表于 ICML 2024。它不让大模型直接输出动作,而是走一个「提出—生成—学习」循环:先由大模型提出一个要学的技能,再自动搭好对应的仿真场景和物体、分解子任务、写出奖励函数等监督信号,最后按任务类型挑选强化学习、运动规划或轨迹优化去学会它。这样几乎不需要人工设计任务,就能持续产出各种技能的演示数据,涵盖铰接物体、柔性物体操作和腿足运动。项目主页称其用 Genesis 仿真引擎做模拟和渲染。它是「生成式仿真」的代表工作。

例子大模型提出「把行李箱拉杆拉出来」这个任务,RoboGen 自动放入行李箱模型、设置初始状态、生成奖励函数,再用强化学习训练出这个技能。

也叫
RoboGen
相关
生成式仿真、Genesis、程序化生成、大模型任务规划、奖励函数、仿真数据
来源
RoboGen (arXiv:2311.01455)
RoboGen 项目主页
信息截至
2024-06

在完整名词表里查看 →