dsh-desktop-control
在终端中运行以下命令:
dsh plugin install ADCCMYK/dsh-desktop-control
将以下提示词粘贴到 DeepSeek Harness 对话框中:
在 DeepSeek Harness 中执行 dsh plugin install ADCCMYK/dsh-desktop-control,或从源码仓库 https://github.com/ADCCMYK/dsh-desktop-control 在线安装该插件。
插件介绍
许多 AI 助手只能读写文本,却碰不到你正在用的 Windows 桌面:无法看清当前画面、切换窗口,也无法替你点按或输入。dsh-desktop-control 把这种缺口补上,把截图、窗口枚举与聚焦、键鼠注入、序列宏以及后台观察,收成一组可由对话调用的工具;动作与截图在 Python 侧执行,宿主只负责插件壳与工具注册。
插件刻意不走控件树、OCR 或图标识别,感知几乎只靠截图:找窗口、找按钮、判断结果,都把画面交给模型去看。换来的是操作范围更宽——游戏画面、自绘界面、远程桌面等「认不出来」的区域,只要在图里能指出位置就能操作;代价是 token 与像素级误差,关键步骤需要结合回执与局部截图核对。
共 17 个工具覆盖从整屏/窗口截图、鼠标移动点击拖拽、滚轮与组合键,到按图查找点击、等待条件、以及键鼠序列宏。安装后默认关闭、不会注册工具,在设置里打开「启用桌面控制」后才会出现;启用失败时可调用诊断工具查看原因与修法。
适合在自有或已获授权的设备上,希望让 AI 协助桌面自动化、演示操作或旁路式观察的场景。使用前请理解真实执行能力与截图可能带来的敏感信息风险,序列与宏运行前确认前台窗口与光标位置。
使用场景
- 让 AI 根据截图查看界面并代为点击、输入或切换窗口
- 用序列宏重复执行固定键鼠流程,减少手工操作
- 对游戏或自绘界面做旁路式操作,不依赖控件树识别
适合人员
- 在自有 Windows 设备上希望接入桌面工具的 AI 用户
- 需要远程协助式桌面操作或演示的开发者
- 接受截图感知与 token 代价的自动化爱好者