具身智能新手名词表English

DeepMind 控制套件

DeepMind Control SuiteDMC进阶

DeepMind 基于 MuJoCo 的连续控制强化学习标准任务集

DeepMind Control Suite 由 DeepMind 的 Yuval Tassa 等人于 2018 年发布,是开源库 dm_control 的一部分。它用 MuJoCo 物理引擎搭了一组连续控制任务,领域包括倒立摆小车(cartpole)、猎豹(cheetah)、平面双足步行者(walker)、人形(humanoid)、四足(quadruped)、机械手指(finger)等,每个领域下有难度不同的任务。所有任务结构统一、奖励可解释:每步奖励在 0 到 1 之间,一回合固定 1000 步,所以满分是 1000。输入既可以是关节状态,也可以只给相机像素,因此它成了测样本效率和「从像素学控制」的常用基准,Dreamer、DrQ、TD-MPC 等算法都在上面报结果。dm_control 还附带 MJCF 模型编辑、组件化搭环境和多智能体足球等工具。

例子walker-walk 任务:让平面双足模型学会向前走,只给相机图像作输入,比较不同算法在相同交互步数下能拿到多高的回报(上限 1000)。

也叫
dm_control、DM Control
相关
强化学习、MuJoCo、基准测试、DreamerV3、TD-MPC2、样本效率
来源
DeepMind Control Suite (arXiv 1801.00690)
google-deepmind/dm_control GitHub

在完整名词表里查看 →