一次示范就能终身掌握!让手机AI轻松搞定复杂操作丨浙大&vivo出品

浙江大学与vivo联合提出的LearnAct框架,通过一次示范就能显著提升手机GUI智能体在复杂操作中的准确率,有效解决了现有智能体在长尾场景中的应用难题。

研究团队还构建了首个专为示范学习设计的基准LearnGUI,包含2,252个离线任务和101个在线任务,支持对示范学习能力进行系统研究。

LearnAct框架由DemoParser、KnowSeeker和ActExecutor三个智能体组成,能够自动理解人类示范并转化为结构化知识,从而帮助智能体适应新场景。

[原文链接]

上一篇:

下一篇:

微信