win10GUI-dsh-plugin
在终端中运行以下命令:
dsh plugin install chengzhang0528/win10GUI-dsh-plugin
将以下提示词粘贴到 DeepSeek Harness 对话框中:
在 DeepSeek Harness 中执行 dsh plugin install chengzhang0528/win10GUI-dsh-plugin 安装插件,并按仓库 https://github.com/chengzhang0528/win10GUI-dsh-plugin 的说明在 profile 中启用 deskpilot 行、配置制品后重启宿主并用 deskpilot_doctor 确认。
插件介绍
很多 AI 助手只能告诉你“点哪里、填什么”,却无法在你的 Windows 桌面上真正动手。DeskPilot(win10GUI-dsh-plugin)把交互式桌面能力接入 DeepSeek Harness:Agent 能观察窗口与控件、通过 UIA 执行动作、模拟真实键鼠、做可信截图与离线 OCR,并在需要时用 Chrome CDP 操作页面,把建议变成可验证的操作结果。
插件在宿主侧提供 ctx.deskpilot,并为每个会话维持一个 win-agent.exe NDJSON 进程。模型侧有四类工具(自检、只读调用、批处理工作流、会话管理),另有斜杠命令与多组 Agent Skills,覆盖桌面核心、浏览器、消息场景、微信辅助、测试与流程演进等方向。deskpilot_doctor 可一次性确认本机是否具备 UIA、输入、截图、桌面文字与 Chrome 等能力,便于在启用前建立信心。
它面向已在 Windows 10(x64,已登录可交互桌面)上使用 DSH 的用户:需要自动化重复 UI 操作、跨应用填表与读屏、或让 Agent 在授权范围内驱动 Chrome 与本地软件的人。插件默认禁用,需你在 profile 中显式启用并配置制品入口,首次运行可能准备 .NET Desktop Runtime 并出现 UAC,属于正常自举流程。
使用前请理解权限与边界:会操作真实前台桌面与当前 Chrome 配置,但不绕过 UAC、安全桌面或密码控件,登录与验证码仍由你本人完成;网络仅从配置的固定地址拉取制品与微软官方运行时,不擅自回退到其他源。适合在明确授权、可控环境下的桌面协同,而非无人值守的越权自动化。
使用场景
- 让 Agent 在 Windows 上观察窗口、点击控件并填写表单,完成跨应用重复操作
- 需要可信截图与离线 OCR 从桌面读出文字,再据此继续决策或批处理步骤
- 在授权前提下用 Chrome CDP 配合本地桌面动作,完成页面与原生 UI 联动任务
适合人员
- 在 Windows 10 上使用 DeepSeek Harness、希望 Agent 能实际操作桌面的用户
- 需要 UIA、键鼠与截图能力做 UI 验证或半自动测试的开发者
- 在明确授权下做浏览器与本地软件协同、消息或办公场景自动化的进阶用户