Mobile Use

活跃
GitHub Python Apache-2.0

简介

让 AI 智能体像人类一样使用真实 Android 和 iOS 应用的框架，支持移动端界面的自主操作和交互。

核心特性

  • 自然语言控制 Android 和 iOS 设备
  • 基于无障碍树的 UI 感知自动化操作
  • 从任意应用抓取数据并输出结构化 JSON
  • 可扩展的 LLM 配置，支持多模型提供商
  • Docker 快速启动，Android 设备即开即用
  • AndroidWorld 基准测试领先，100% 完成率

适用场景

💡 自动化发送消息、导航应用等重复性手机操作
💡 从移动端应用中提取结构化数据用于分析或报告
💡 使用自然语言进行移动应用 UI 流程端到端测试
💡 构建能操作真实移动界面的 AI 驱动助手
💡 无需编写平台特定代码即可原型化移动自动化脚本

标签

browser python agent automation testing

分类

🌐 浏览器 Agent

快速开始

1. 通过 pip 安装：pip install minitap-mobile-use
2. 克隆仓库并将 .env.example 复制为 .env
3. 在 .env 中添加你的 LLM API 密钥
4. 通过 USB 连接 Android 设备并启用 USB 调试
5. 运行：python -m mobile_use "打开 Gmail，查找前 3 封未读邮件" --output-description "包含发件人和主题的 JSON 列表"
访问 GitHub 访问官网

相关项目