具身智能新手名词表English

触觉仿真

Tactile Simulation进阶

在仿真器里模拟触觉传感器读数,让带触觉的策略能在仿真中训练。

触觉仿真指在物理仿真器中生成触觉传感器应有的输出,比如视触觉传感器(用内置相机拍弹性胶面形变的传感器,如 GelSight、DIGIT)的触觉图像、胶面标记点的位移,或压阻阵列的压力分布。难点是要同时处理接触、软材料形变、光照和成像,既要像真的,又要算得快。常见做法大致三类:拿渲染器按接触几何直接渲染触觉图像,如 Meta 开源的 TACTO;用少量真实样例标定查找表,如卡内基梅隆大学的 Taxim;用 GPU 并行计算接触力场和图像,如英伟达的 TacSL。它让仿真到现实迁移能扩展到插孔、拧螺丝这类接触丰富的操作,但仿真读数和真实传感器之间仍有差距,常要配合域随机化或少量真机数据。

例子TACTO 论文用仿真生成了 100 万次抓取的触觉数据,训练模型预测一次抓取稳不稳。

也叫
触觉传感器仿真、Tactile Sensor Simulation
相关
视触觉传感器、TACTO、Taxim、TacSL 视触觉仿真库、传感器仿真、触觉图像
来源
TACTO: A Fast, Flexible, and Open-source Simulator for High-Resolution Vision-based Tactile Sensors (arXiv 2012.08456)
Taxim: An Example-based Simulation Model for GelSight Tactile Sensors (arXiv 2109.04027)
TacSL: A Library for Visuotactile Sensor Simulation and Learning (arXiv 2408.06506)

在完整名词表里查看 →