DSH Plugins
返回列表
🖥️

dsh-android-pane

客户端 更新于 2026.09.16

在终端中运行以下命令:

dsh plugin install hoyyang/dsh-android-pane

将以下提示词粘贴到 DeepSeek Harness 对话框中:

前往 https://github.com/hoyyang/dsh-android-pane 查看完整文档与更新日志,然后在 DeepSeek Harness 中执行 dsh plugin install hoyyang/dsh-android-pane 即可完成安装,零配置、无需 API Key。

插件介绍

让 AI agent 替你操作 Android 设备时,你往往只能听它描述结果,既看不见画面,也无法在它点错时立刻接管。dsh-android-pane 把一块实时 Android 画面面板直接嵌进 DSH 对话旁边,模拟器与 USB 真机都能接,零配置、无需改任何 DSH 设置,打开网页就能围观。

画面走 scrcpy-server H.264 编码经 adb 端口转发到本机回环,WebCodecs 硬解渲染,本机 30 到 60fps 流畅播放;scrcpy 起不来的老设备或强化安全系统会自动降级为截图轮播。agent 端配备点按、滑动、文本输入、按键、滚动、旋转等上下文经济工具,每次操作自动回传截图以自证改动;uiautomator 控件树附带点按坐标,让 agent 按文本模糊匹配元素定位,告别盲点。遇到银行、密码管理器等 FLAG_SECURE 黑屏页面,面板自动识别并给出缓解链,仍被系统拦截则降级为可点按的控件树文本视图,每步结果明示,绝不静默。你还可以直接在画面上点按、拖拽与 agent 共屏协作,agent 操作时亮起红色徽标,谁在开车一目了然。

适合需要让 agent 端到端操作 Android 应用的开发者与测试人员,也适合想围观 AI 如何看见并动手的 DSH 日常用户。所有数据流仅允许 127.0.0.1 访问,隐私边界清晰。

使用场景

  • 让 agent 端到端操作 Android 应用并自证每一步改动
  • 围观 AI 在真机上点按、滑动、输入,随时接管共屏协作
  • 调试时录屏、抓 logcat、回放动作时间线,定位问题

适合人员

  • 需要让 AI agent 操作 Android 设备的开发者与测试人员
  • 想让 agent 看到并验证操作结果的 DSH 日常用户
  • 在模拟器与多品牌真机上做移动端自动化的工程师