dsh-plugin-midscene
在终端中运行以下命令:
dsh plugin install ciky20171114/dsh-plugin-midscene
将以下提示词粘贴到 DeepSeek Harness 对话框中:
在 DeepSeek Harness 中安装 dsh-plugin-midscene,请执行安装命令并指定完整源码地址 https://github.com/ciky20171114/dsh-plugin-midscene。
插件介绍
在 UI 自动化测试中,编写繁琐的元素定位代码往往是效率的瓶颈。dsh-plugin-midscene 通过引入 Midscene 的 AI 视觉能力,彻底改变了这一现状。它让模型能够直接“看”到屏幕内容,并通过自然语言指令来精准定位和操作界面元素,无需手动编写复杂的 Xpath 或 CSS 选择器。
该插件提供了针对真实环境的强大支持,可在已连接的 Android 设备和 Chrome 浏览器上运行。它封装了 android_ui 和 web_ui 等工具,通过简单的动作参数(如 tap、input、assert)即可完成复杂的交互逻辑,实现了从自然语言到具体 UI 操作的智能转换。
这项技术非常适合需要构建端到端测试流程的 DeepSeek Harness 开发者与工作流工程师。无论是测试移动应用还是网页交互,它都能极大地简化测试脚本的编写工作,降低维护成本,让自动化测试更加直观和高效。
使用场景
- 通过自然语言指令控制 Android 应用进行自动化测试。
- 利用视觉模型在 Chrome 浏览器中完成网页交互流程验证。
- 集成到 DeepSeek Harness 工作流中实现端到端测试。
适合人员
- 需要快速编写 UI 自动化测试脚本的测试工程师。
- 正在构建 AI 驱动工作流的 DevOps 工程师。
- 使用 DeepSeek Harness 的开发者。