大模型竟然能玩手机了，还能用软件修图：「AppAgent」会成为2024年的新趋势吗？

AIGC动态欢迎阅读

原标题：大模型竟然能玩手机了，还能用软件修图：「AppAgent」会成为2024年的新趋势吗？
关键字：腾讯,动作,任务,能力,操作
文章来源：机器之心
内容字数：8372字

内容摘要：

机器之心专栏
机器之心编辑部这就是2024年的新趋势吗？近日，一项名为 AppAgent 的创新技术引起了广泛关注。
简单来说，AppAgent 的智能代理能力可以用于操作任何 App，它在 50 个复杂手机任务上展示了强大的能力。AppAgent 幕后团队来自腾讯，相关技术论文也已经公布。论文地址：https://arxiv.org/abs/2312.13771
主页地址：https://appagent-official.github.io/
据论文介绍，这项技术通过引入一种基于大型语言模型（LLMs）的多模态智能代理（Agent）框架，赋予了智能体操作智能手机应用的能力。与传统的智能助手如 Siri 不同，AppAgent 不依赖于系统后端访问，而是通过模拟人类的点击和滑动等操作，直接与手机应用的图形用户界面（GUI）互动。这种独特的方法不仅提高了安全性和隐私性，还确保了智能体能够适应应用界面的变化和更新。AppAgent 的核心在于其创新的学习方式。智能体可以通过自主探索或观察人类演示来学习如何导航和使用新应用。在自主探索过程中，智能体通过一系列预定义的动作与应用互动，观察每个

原文链接：大模型竟然能玩手机了，还能用软件修图：「AppAgent」会成为2024年的新趋势吗？

联系作者

文章来源：机器之心
作者微信：almosthuman2014
作者简介：专业的人工智能媒体和产业服务平台