跳到正文
arXiv · cs.RO· Zebin Xing·· 5 天前精选AI 评分75

PhysCanvas:面向机器人策略评估与学习的视觉触觉世界模型

Physical Canvas: A Vision Tactile World Model For Robot Policy Evaluation And Learning

AI 导读

研究人员提出PhysCanvas,一种统一多模态的视觉触觉世界模型,用于接触密集型机器人操作。该模型整合多视角RGB、触觉图像、标记位移、任务状态和动作,通过一致性感知后训练将世界模型与真实世界成功率的相关性从0.602提升至0.885,并将策略在真实世界中的成功率从59.1%提升至70.8%。

推荐理由

通过统一视觉与触觉模态建模,PhysCanvas将机器人策略评估与学习的成功率相关性提升至88.5%,解决了仿真与真实世界接触动力学不一致的难题。

来源:arXiv · cs.RO · arxiv.org