云手机
云手机
文档指南
请输入
- 文档首页
云手机Mobile Use Agent产品简介什么是 Mobile Use Agent
复制全文
下载 pdf什么是 Mobile Use Agent
文档反馈
问问助手Mobile Use Agent（MUA）是一款企业级 AI 智能体，运行于云端环境中，依托 GUI 模型构建，专为移动应用自动化任务设计。MUA 能够理解自然语言指令，结合界面视觉识别、任务规划与自动操作能力，在移动 App 中完成点击、输入、滑动、跳转、等待和状态判断等操作，并输出结果、截图与日志，为真实移动应用场景提供自动执行能力。
相较于传统依赖固定脚本或坐标的自动化方式，MUA 更适合页面变化频繁、流程较长、需要跨 App 协同的任务场景。它不仅能“理解要做什么”，还能进一步“把事情做完”，帮助企业把移动端业务流程纳入可执行、可追踪、可管理的智能工作流。
注意
为避免影响后续业务，对于采用 veFaaS 方式接入 Mobile Use Agent 的用户，请及时升级至 Mobile Use Agent OpenAPI 方式进行接入，详情请参见 接入方式变更公告：应对模型下线。
效果展示
Replay
00:00
/
00:00
Live
Play
00:00
Fullscreen
Cssfullscreen
Click and hold to drag
产品架构
产品采用分层设计：
- Agent 交互层：
- 面向用户的智能交互层，提供自然语言交互和任务编排能力：
- Mobile Use Agent Demo：免费快速体验 Mobile Use Agent 执行能力，支持多端试用。
- Mobile Use Sample Code：支持使用示例代码快速搭建 Mobile Use Agent 并添加业务逻辑。
- Mobile Use Agent CLI：支持用户通过命令行工具快速接入 Mobile Use Agent，详情请参见 mua_cli。
- PaaS 调度层：
- 提供中间件服务和智能调度能力，连接底层资源与上层应用：
- 智能调度：智能分配云手机资源，支持多任务并行执行和队列管理。
- 模型服务：集成方舟大模型服务，提供视觉理解、自然语言处理等 AI 能力。
- 流媒体服务：实现云手机画面的实时传输和远程控制。
- 监控运维：全链路监控系统状态，提供日志记录、性能分析和故障诊断。
- IaaS 资源层：
- 作为整个产品的基础设施层，提供稳定可靠的计算和存储资源：
- 云手机集群：基于火山引擎云原生架构，提供海量 ARM 虚拟机资源池。
- 弹性计算：根据任务负载自动扩缩容，保证高并发场景下的资源供给。
- 网络基础：提供低延迟、高带宽的网络连接，确保实时交互体验。
- 存储服务：集成 TOS 对象存储，提供海量数据存储和快速访问能力。
- 安全隔离：每个云手机实例独立运行，确保任务间的安全隔离和数据保护。
技术架构
以 “用户让云手机打开某 APP 并点击按钮” 为例，本产品的工作原理如下：
- 用户指令输入：通过 “Agent 对话聊天” 发送自然语言（如 “帮我打开 xxx APP”）。
- 指令传输：经火山 APIG 网关，将指令转发到 Mobile Use Agent Service。
- 智能决策：
- Prompt 模块构建提示词，结合 Memory 的上下文（如历史任务），将指令转化为 LLM 可处理的格式。
- 多模态 LLM 解析指令，生成 “打开 APP→点击按钮” 的操作逻辑。
- 操作调度：
- MCP tool Call 调用 MCP 接口，将操作逻辑转化为具体指令。
- Pod Scheduler 分配可用的云手机实例，MCP 向该实例下发操作指令。
- 执行与反馈：
- 云手机 PaaS 执行操作（打开 APP、模拟点击），并通过 “串流信息下发” 将实时画面回传到前端 “云手机串流画面”。
- 操作结果（成功 / 失败、界面变化）经 Agent 对话聊天反馈给用户。
最近更新时间：2026.09.29 15:09:34
这个页面对您有帮助吗？
有用
有用
无用
无用