dsh-mobile-gui-agent
在终端中运行以下命令:
dsh plugin install kunjinkao-os/dsh-mobile-gui-agent
将以下提示词粘贴到 DeepSeek Harness 对话框中:
在 DeepSeek Harness 中安装该插件可运行 dsh plugin install kunjinkao-os/dsh-mobile-gui-agent,源码地址为 https://github.com/kunjinkao-os/dsh-mobile-gui-agent。
插件介绍
在桌面端自动化日益成熟的今天,移动设备的 GUI 自动化仍常面临工具链割裂、输入不稳定与操作难以验证的痛点。dsh-mobile-gui-agent 将 DeepSeek Harness 的智能体能力延伸到 Android 真机或模拟器:它通过 ADB 建立桥梁,在 Harness Web UI 中提供独立的 mobile_gui_agent 会话,让智能体以“观察 → 决策 → 执行 → 验证”的闭环完成真实手机上的任务。无需 root 或常驻无障碍服务,插件结合 ADB 截图与 UIAutomator 层级,既能理解屏幕内容,又能执行点击、滑动、文本输入、按键与应用启动等操作,并在每一步后强制回到最新观察,避免失控。
该插件的核心优势在于稳定与安全。它内置元素过期保护、屏幕稳定等待、卡住检测、步数与时间上限,并支持无线 ADB 与 Unicode 输入辅助(自动启用并恢复输入法)。对于发送、发布、删除、支付、转账、安装或修改账户安全等语义敏感操作,插件会立即暂停并请求 Harness 标准审批,审批通过后才继续执行。整套机制让模型只能通过严格的 phone_observe / phone_act 工具与设备交互,无法随意注入 ADB 命令,从架构上限制了风险。
因此,这款插件特别适合需要在真实 Android 设备上评估多模态智能体、构建移动端任务基准或进行自动化测试的开发者与研究人员。你可以使用空白会话快速启动任务,也可以按推荐流程先发送普通消息再切换到 mobile_gui_agent 标签,清晰区分对话消息与手机指令。测试环境建议使用非生产账号与专用测试机,以充分体验其验证闭环与审批流带来的可控性。
截图预览
使用场景
- 在真实 Android 设备上自动化执行应用内操作与导航
- 通过自然语言任务驱动手机完成发送、支付等敏感操作并经过审批
- 使用观察-执行-验证闭环构建移动端智能体评测基准
适合人员
- 需要自动化测试 Android 应用的测试工程师
- 研究多模态智能体在移动端表现的 AI 研究人员
- 希望在真实设备上安全执行手机任务的开发者


