DSH Plugins
返回列表
dsh-computer-use

dsh-computer-use

模型推理 更新于 2026.10.17

在终端中运行以下命令:

dsh plugin install JHyugou/dsh-computer-use

将以下提示词粘贴到 DeepSeek Harness 对话框中:

在 DeepSeek Harness 中执行 dsh plugin install JHyugou/dsh-computer-use,或从 https://github.com/JHyugou/dsh-computer-use 克隆后于插件页选择「从路径安装」并重启 DSH。

插件介绍

上游 ZCode 开源版里的 Computer Use 只是占位提示,真实实现从未随仓库发布,但工具名、参数纪律与错误语义仍散落在客户端与契约代码里。本插件据此在 DeepSeek Harness 上重建「电脑控制」:让对话里的模型能观察当前桌面、理解应用界面,并以与上游同名的 25 个工具执行点击、输入、快捷键、拖拽滚轮与剪贴板等操作,后端换成 Windows 上可长期运行的 PowerShell 与 UI Automation,不再依赖未开源的原生 Helper。

核心能力围绕「看得见、指得准、控得住」展开。模型可先截屏与读取界面树,用 state_id 与元素索引定位控件,再按契约做坐标或元素级动作;配置里可调节访问模式(全自动、每次询问或完全禁用)、操作浮层与截图预算,避免子代理在用户看不见时悄悄动键鼠。实现侧刻意对齐上游的坐标纪律与稳定错误码,并在高 DPI 下保证截图与自动化坐标一致,超时则安全重启后端而非猜测响应归属。

适合在 Windows 上把 DSH 当成「能动手」的桌面助手的人:需要模型帮忙填表、点流程、跨应用操作时,只要接受本机真实鼠标键盘会被调用,并愿意通过菜单或配置管好权限闸门。若你主要做 macOS/Linux、或只希望只读看屏而不让模型注入输入,应知悉当前后端仅支持 Windows,且提权窗口、自绘界面与部分 UWP 场景仍有 README 中列出的已知限制。

截图预览

使用场景

  • 让模型根据截屏与界面树点击按钮、填表并完成跨应用流程
  • 在需要人工审批或全自动之间切换,安全地授权桌面键鼠操作
  • 调试与验证 Computer Use 契约时,在真实 DSH 会话里端到端试动作

适合人员

  • 在 Windows 上使用 DSH、希望 Agent 能动手操作本机桌面的用户
  • 需要重建或对齐 ZCode Computer Use 工具契约的插件与集成开发者
  • 愿意配置访问模式与权限闸门、接受已知平台限制的进阶用户