HuggingFace Daily Papers· Hongcheng Gao, Zelin Zheng, Alex Zhou, Jay Zhu, Shijia Ge, Yazhe Wang, Xiping Li, Jianshu Zeng, Di Wu, Xuan Shangguan, Yexing Wan, Lingyu He, Yongli Wang, Xiaohan Yu, Zhiqi Jia, Yue Liu, Bryan Hooi, Yinpeng Dong, Wentao Zhang, Sihang Wu, Xiao He·· 2 天前精选AI 评分75
EmbodiedLab: 评估具身智能体行动以认知能力的基准测试
EmbodiedLab: Benchmarking Embodied Agents That Act to Know
AI 导读
研究团队提出 EmbodiedLab 基准测试，评估具身智能体通过行动来获取知识的能力。该测试包含五个学科的 30 个实验，机器人需自主选择实验程序并操作物理模拟实验室。结果显示，即使是最强的智能体在原生控制下成功率也不足一半，主要失败原因在于与实验装置的交互。
推荐理由
EmbodiedLab 基准测试首次将机器人'行动以认知'的能力量化，揭示了当前智能体在物理实验交互中的显著短板。
来源：HuggingFace Daily Papers · arxiv.org