dsh-computer-use
在终端中运行以下命令:
dsh plugin install Kinfxhk/dsh-computer-use
将以下提示词粘贴到 DeepSeek Harness 对话框中:
在 DeepSeek Harness 中执行 dsh plugin install Kinfxhk/dsh-computer-use,或从 https://github.com/Kinfxhk/dsh-computer-use 获取源码后按 DSH 插件管理器安装并重启。
插件介绍
很多 Agent 只能读文件和跑命令,却碰不到你屏幕上正在用的应用。DSH Computer Use 在侧栏增加「电脑」页:开关打开后,Agent 通过 computer_use 工具观察你指定的单个窗口,并在你的控制下执行点击、输入、按键与滚动;你一关开关,输入类操作会被拒绝,observe 也要等你再开才继续。
核心流程很清晰:先列出顶层窗口,再对选定窗口做 observe——得到截图、最多 80 个可点元素(可用 query 筛选),并优先用 elementToken 定位,坐标只是后备。每次操作都必须带上 pid 与 windowId,避免「全桌面乱点」。插件会启动私有的 cua-driver 管道(standard 权限模式),不会挂到别人的 driver,也不会用 unrestricted 模式;侧栏页展示 driver 状态与最近操作记录,打字内容只记长度不写进页面。
这是 Windows 专用能力,需要单独安装官方 Cua driver(或通过 CUA_DRIVER_BIN 指定路径);不支持剪贴板、结束进程、全桌面输入,也不应用于密码、付款或权限对话框。
适合需要在 DSH 里让 Agent 协助操作本地 GUI(填表、点按钮、滚动浏览)的 Windows 用户,尤其是希望随时能一键关掉电脑操作、且只作用于单一窗口的场景。
使用场景
- 让 Agent 在指定窗口里点按钮、填表单并滚动浏览
- 需要对照截图与可点元素 token 完成桌面应用内的重复操作
- 临时开启电脑页协助操作,做完立刻关掉开关
适合人员
- 在 Windows 上使用 DSH、希望 Agent 能操作本地应用的开发者
- 需要可控、单窗口边界而非全桌面控制的团队
- 已安装或愿意配置 Cua driver 的用户