DSH Plugins
返回列表
⚙️

dsh-win-computer-use

工作流 更新于 2026.11.10

在终端中运行以下命令:

dsh plugin install orangeofcarl0-sys/dsh-win-computer-use

将以下提示词粘贴到 DeepSeek Harness 对话框中:

在 DeepSeek Harness 中执行 dsh plugin install orangeofcarl0-sys/dsh-win-computer-use 即可从 https://github.com/orangeofcarl0-sys/dsh-win-computer-use 安装本插件。

插件介绍

当你在 DeepSeek Harness 里需要让 agent 真正「动手」操作本机桌面——而不是只会读文件、跑命令——Windows 上的前台锁、XAML/WinUI 输入、观察与点击坐标不一致,往往会让通用 Computer Use 方案在实测里频频撞墙。dsh-win-computer-use 把这一层做成 Windows 优先、可观察、可验证的桌面操作插件:默认只暴露两个稳定入口,其余能力经 dispatcher 按需路由,底层由 cua-driver 驱动本地桌面,并用独立虚拟光标展示过程,不抢你的真实鼠标。

它的工作回路很清晰:先 screen_observe 拿到新鲜的元素编号或窗口本地截图像素坐标,再执行点击、输入、拖拽等动作;过期或无快照会直接拒绝,避免盲操作。观察输出与动作坐标共用同一窗口像素空间,所见即所点。投递上采用后台优先,后台不可用时自动升级前台、必要时绕开前台锁,结束后恢复原焦点——动作默认零审批、零打断,凭据进入密码框则是唯一硬拒绝。

除基础观测与操作外,插件还提供区域放大、组合键与 UIA 后台写值、应用列出与按需前置、断言与等待验证、剪贴板与菜单、以及可锁停整桌面的强杀开关;多步噪声大的任务可委派子 agent,并在能力边界上如实标注宿主是否支持工具范围限制。适合在 Windows 上跑 Harness、需要闭环操控 Win32/WinUI 应用、且希望观测—动作—验证链条在本机踩实的工作流开发者与个人维护者。

使用场景

  • 在 Harness 中自动操作 Win32/WinUI 应用完成表单填写与按钮点击
  • 需要先观察界面再点击,避免无快照盲操作导致误点
  • 后台优先操控最小化窗口,失败时自动前台并恢复原焦点

适合人员

  • 在 Windows 上维护 DeepSeek Harness 工作流的开发者
  • 需要可验证 UIA/截图闭环的桌面 Agent 集成者
  • 愿意接受零审批自治、仅密码框硬拒绝的单机维护者