DSH Plugins
返回列表
dsh-mobile-gui-agent

dsh-mobile-gui-agent

工作流 更新于 2026.08.24

在终端中运行以下命令:

dsh plugin install kunjinkao-os/dsh-mobile-gui-agent

将以下提示词粘贴到 DeepSeek Harness 对话框中:

在 DeepSeek Harness 中安装该插件可运行 dsh plugin install kunjinkao-os/dsh-mobile-gui-agent,源码地址为 https://github.com/kunjinkao-os/dsh-mobile-gui-agent。

插件介绍

在桌面端自动化日益成熟的今天,移动设备的 GUI 自动化仍常面临工具链割裂、输入不稳定与操作难以验证的痛点。dsh-mobile-gui-agent 将 DeepSeek Harness 的智能体能力延伸到 Android 真机或模拟器:它通过 ADB 建立桥梁,在 Harness Web UI 中提供独立的 mobile_gui_agent 会话,让智能体以“观察 → 决策 → 执行 → 验证”的闭环完成真实手机上的任务。无需 root 或常驻无障碍服务,插件结合 ADB 截图与 UIAutomator 层级,既能理解屏幕内容,又能执行点击、滑动、文本输入、按键与应用启动等操作,并在每一步后强制回到最新观察,避免失控。

该插件的核心优势在于稳定与安全。它内置元素过期保护、屏幕稳定等待、卡住检测、步数与时间上限,并支持无线 ADB 与 Unicode 输入辅助(自动启用并恢复输入法)。对于发送、发布、删除、支付、转账、安装或修改账户安全等语义敏感操作,插件会立即暂停并请求 Harness 标准审批,审批通过后才继续执行。整套机制让模型只能通过严格的 phone_observe / phone_act 工具与设备交互,无法随意注入 ADB 命令,从架构上限制了风险。

因此,这款插件特别适合需要在真实 Android 设备上评估多模态智能体、构建移动端任务基准或进行自动化测试的开发者与研究人员。你可以使用空白会话快速启动任务,也可以按推荐流程先发送普通消息再切换到 mobile_gui_agent 标签,清晰区分对话消息与手机指令。测试环境建议使用非生产账号与专用测试机,以充分体验其验证闭环与审批流带来的可控性。

截图预览

使用场景

  • 在真实 Android 设备上自动化执行应用内操作与导航
  • 通过自然语言任务驱动手机完成发送、支付等敏感操作并经过审批
  • 使用观察-执行-验证闭环构建移动端智能体评测基准

适合人员

  • 需要自动化测试 Android 应用的测试工程师
  • 研究多模态智能体在移动端表现的 AI 研究人员
  • 希望在真实设备上安全执行手机任务的开发者