DSH Plugins
返回列表
🖥️

dsh-sidebar-mobile

客户端 更新于 2026.10.16

在终端中运行以下命令:

dsh plugin install j62268781-alt/dsh-sidebar-mobile

将以下提示词粘贴到 DeepSeek Harness 对话框中:

在 DeepSeek Harness 中执行 dsh plugin install j62268781-alt/dsh-sidebar-mobile 安装本插件;源码仓库为 https://github.com/j62268781-alt/dsh-sidebar-mobile。

插件介绍

在 DSH 里做移动端联调时,画面若只有一两帧每秒,人很难盯屏,模型也很难靠截图理解界面。分平台的旧方案往往循环拉整帧 PNG,1080p 每帧几百 KB,瓶颈不在 adb 而在搬运未压缩图像。dsh-sidebar-mobile 把 mobilecli 放进右侧边栏,Android 走 AVC/H.264、iOS 模拟器走 MJPEG,把取流从「搬大图」换成「传码流」,实测帧率可到百帧量级。

面板里可按真机/模拟器分组选设备,离线模拟器可先拉起再串流;画面上点击与拖拽会换算成设备坐标,并提供主屏、返回(Android)、旋转与多种边框外观。同一套能力面向模型开放:列设备、读 UI 树、截图、按标识或文本点元素、列应用、OCR 找字/点字、等待文案、读日志,以及把移动设备面板打开给你看。mobilecli 上游的 skill 会随插件注册,不必自己往 .agents 里抄 playbook。

安全上浏览器从不直接接触 mobilecli 监听的本机端口,流量只经 DSH 自己的 Web 源:先校验 loopback 与可信 Host,再验 HMAC 签名且 deviceId 绑定的短期令牌。适合在 DSH 工作流里需要「实时看一眼、顺手点一下」或让 Agent 自动化真机/模拟器的开发者;若依赖 uiautomator dump、Appium 等与 UiAutomation 并行的工具,或要读完整 Flutter 语义树,请先了解 README 中的已知边界(本插件不提供 VM Service 读树)。

使用场景

  • 在 DSH 右侧边栏实时查看 Android 或 iOS 模拟器画面并直接点按滑动
  • 让模型通过 UI 树与设备工具自动完成真机/模拟器上的联调步骤
  • 画面卡住或需要人工确认时,一键重连串流或由模型打开面板给你看

适合人员

  • 在 DSH 里做移动端开发与联调的工程师
  • 需要高帧率取流而非 PNG 循环截图的测试人员
  • 用 Agent 自动化操作手机界面、读日志与等待文案的团队