HuggingFace Daily Papers· Haoqing Wang, Xiaoyi Zhang, Sicheng Fan, Zhexin Zhang, Xinjie Zhang, Jiahao Li, Bin Li, Yan Lu·· 6 天前精选AI 评分70
混合计算机使用:通用智能体的统一程序化、语义化和视觉界面
Hybrid Computer Use: A Unified Programmatic, Semantic, and Visual Interface for General Agents
AI 导读
研究人员提出混合计算机使用(HCU)接口,结合程序化交互、语义交互和视觉交互三种通道,让智能体能够自主选择和组合使用。在OSWorld 2.0评测中,HCU实现了最高的部分和二进制分数,所有评估模型使用HCU后性能均有提升,且在不同通道间分配工作的方式各不相同。
推荐理由
统一程序化、语义化和视觉三种交互通道,让智能体自主选择组合,显著提升任务完成效率。
来源:HuggingFace Daily Papers · arxiv.org