dsh-computer-use
在终端中运行以下命令:
dsh plugin install hisence999/dsh-computer-use
将以下提示词粘贴到 DeepSeek Harness 对话框中:
在 DSH 终端执行 dsh plugin install hisence999/dsh-computer-use 安装插件(源码:https://github.com/hisence999/dsh-computer-use),装完后完全退出托盘中的 DSH Desktop 再重新打开以加载插件。
插件介绍
在 Harness 里布置任务时,agent 往往只能写代码、跑命令,却碰不到你屏幕上已经打开的程序。记事本、计算器、浏览器、音乐客户端——这些日常界面仍需要你亲手点选和输入。dsh-computer-use 把这条缺口补上:让 agent 像坐在电脑前一样观察 Windows 桌面,再按你的目标去操作。
插件通过列出窗口、读取 UI Automation 控件树,以及在需要时用 Windows 自带 OCR 识别屏幕文字,来定位按钮、输入框和可见文本。能后台直接操作的步骤会优先在后台完成,尽量不抢鼠标和前台;必须用坐标点击、按键或粘贴时,会有屏幕边缘光晕、提示条和鼠标旁标签,且可随时按 Esc(或自设快捷键)停止。一轮任务在对话里会留下可读的步骤记录和截图,结束时还可看到任务总结。
浏览器窗口与普通程序一视同仁:读控件、截图、点击、填表,不必单独接一套浏览器自动化。还提供 24 个桌面工具与 1 个管理入口,可在设置里选择全部、精简、懒启动或自定义加载;同一时间仅一段对话占用桌面操控,避免多会话抢键盘鼠标。
适合已在 Windows 上使用 DSH Desktop(或 MCP 客户端)并希望 agent 完成跨应用桌面任务的人——例如填表单、在已开软件里验算、搜索并确认页面结果、在本地程序里输入并核对内容。处理与截图均在本地完成;是否把界面内容发给远程模型,取决于你的 DSH 与模型配置。
截图预览
使用场景
- 在记事本输入文字并读取界面确认写入成功
- 在已打开的计算器或浏览器里完成操作并核对结果
- 跨多个桌面窗口填表、搜索、点选,并等待预期界面出现
适合人员
- 在 Windows 上使用 DSH Desktop、希望 agent 操作真实程序的用户
- 需要跨应用桌面任务而非仅命令行的 Harness 使用者
- 接受本地读屏与键鼠提示、并需随时 Esc 停止的桌面自动化场景
