dsh-computer-use-ng

工作流更新于 2026.10.20

在终端中运行以下命令：

dsh plugin install AndroidSix/dsh-computer-use-ng

将以下提示词粘贴到 DeepSeek Harness 对话框中：

在 DeepSeek Harness 中执行 dsh plugin install AndroidSix/dsh-computer-use-ng，或按插件管理器从 https://github.com/AndroidSix/dsh-computer-use-ng 安装后重启宿主并确认插件已启用。

插件介绍

普通文本 Agent 能回答问题，却很难直接完成「打开应用、填表、点按钮、再核对界面」这类桌面任务。dsh-computer-use-ng 为 DeepSeek Harness 提供一层可观察、可约束、可验证的 Computer Use 能力：Agent 必须先拿到窗口与界面元素的观察快照，再在同一坐标空间里执行动作，而不是悄悄往系统里塞一串不可见事件。

插件把交互拆成「观察 → 操作 → 再观察验证」的闭环。screen_observe 可读 Accessibility/AX/UIA 树、元数据或截图，并支持 ax、native、vision 三种观察模式；点击、双击、右键经 cua-driver 的独立虚拟光标完成，用户能看到光标移动过程。此外还有文本与快捷键输入、滚动与拖拽、列出与启动应用等 12 个模型工具，工具名与上游习惯保持一致，便于沿用已有提示词与工作流。

内置安全护栏面向真实桌面场景：无快照或快照过期会拒绝动作；可配置应用白名单；危险语义会请求确认；密码框拒绝自动输入。macOS 已验证；Windows/Linux 路径与逻辑已有覆盖，但 GUI 验收因环境限制尚未完全确认。AX/UIA 不完整时（如 Electron、Canvas、游戏）可改用 native 或 vision。

适合需要让 Harness 操作原生桌面应用、搭建可审计的桌面自动化、做 Computer Use 或视觉定位研究，以及为内部工具和个人工作流增加「看得见、管得住」执行层的开发者与高级用户。本插件为社区维护分支（自 0.4.0 起跟进 DSH 0.2+），非 DeepSeek 官方产品。