HuggingFace Daily Papers· Jaehyeong Jo, Sangwon Jang, Sihyun Yu, Seonghyeon Ye, Yekyung Nah, Hojung Jung, Kimin Lee, Sung Ju Hwang·· 3 天前精选AI 评分70
Future Representation Distillation for Imagination-free World Action Models
Future Representation Distillation for Imagination-free World Action Models
AI 导读
研究人员提出 DreamFree,一种通过表示蒸馏将预训练视频扩散模型转化为预测视觉编码器的方法,使机器人能够基于当前观测预测动作而无需生成未来视频。该方法在真实和模拟任务中实现了比最先进 VLA 和 WAM 更高的成功率,并使用 14B 视频扩散主干模型以 11Hz 频率实现实时闭环控制。
推荐理由
通过表示蒸馏将视频扩散模型转化为预测视觉编码器,DreamFree 实现实时机器人控制且无需未来视频生成。
来源:HuggingFace Daily Papers · arxiv.org