arXiv · cs.RO· Shengbang Liu·· 6 天前精选AI 评分70
RoboValue: 用于机器人价值模型统一评估的细粒度仿真与真实世界基准
RoboValue: A Fine-Grained Sim-and-Real Benchmark for Unified Evaluation of Robotic Value Models
AI 导读
研究人员提出RoboValue基准,用于统一评估机器人价值模型,涵盖任务状态理解、时间进度监控、故障恢复推理和价值一致性四个维度。该基准包含15个仿真和20个真实世界操作任务,评估结果显示现有模型在细粒度指令锚定、历史依赖进度跟踪和恢复评估方面存在错误。
推荐理由
RoboValue基准揭示了现有机器人价值模型在细粒度评估中的不足,为价值监督提供了具体改进方向。
来源:arXiv · cs.RO · arxiv.org