dsh-codex-computer-use
在终端中运行以下命令:
dsh plugin install Han-1413141/dsh-codex-computer-use
将以下提示词粘贴到 DeepSeek Harness 对话框中:
在 DeepSeek Harness 中执行 dsh plugin install Han-1413141/dsh-codex-computer-use,或从 https://github.com/Han-1413141/dsh-codex-computer-use 的 Releases 获取安装包后按仓库说明安装,然后重启 DSH。
插件介绍
在 DeepSeek Harness 里想让模型真正「动手」操作 Windows 桌面时,往往缺少一条可靠、可审计的本机通路。DSH Codex Computer Use 把 DSH 与已安装的 Codex 桌面版 Windows Computer Use 接在一起:由你当前会话里的模型决定读什么、点什么、输入什么,插件负责调用本机 @oai/sky 运行时,把文字观察与截图以 DSH 原生工具结果返回,无需再为电脑操作单独挂一层 OpenAI 云端模型。
核心能力覆盖「先看再动」的完整链路:枚举窗口与应用、获取窗口状态(控件树与可选截图)、启动应用、点击、输入文字、按键、滚动、拖动等。典型流程是先列出窗口编号,再读取目标窗口状态拿到 observation_id,每次动作携带最近一次观察编号;坐标类操作还需对应截图的 screenshot_id。任务结束、取消或本轮原生运行终止时,连接与蓝色状态条会自动收尾,同一轮内复用后台工作进程,下次需要时再启动。
授权与边界也写得很清楚:首次访问应用会弹出独立 Windows 授权窗口(标题为 DeepSeek Harness - Computer Use),批准后仅在本次 DSH 会话内记住;只读或工作区写入会话访问桌面仍会走 DSH 会话权限。发送、付款等高风险动作需调用方显式传 confirm 与 reason。这是社区插件,依赖本机 Codex 与 Computer Use 初始化,不是 OpenAI 官方第三方接口;若模型不支持图片,仍可读控件树,但无法让模型直接「看」截图。
适合已在 Windows 上使用 DSH(0.2.0-rc.2 及以上)、并已安装并完成 Computer Use 初始化的 Codex 用户:自动化记事本等桌面任务、让代理先检查窗口与焦点再逐步操作、或在需要人工确认的场景下做可控的桌面读写。不需要先打开 Codex 主窗口或保持聊天运行,首次调用工具时插件会自动拉起后台工作进程并查找 codex.exe。
使用场景
- 在记事本等应用中按步骤输入并核对焦点
- 先枚举窗口再读取控件树与截图后点击操作
- 需要人工批准后再访问指定桌面应用
适合人员
- 在 Windows 上使用 DSH 且已安装 Codex 的用户
- 希望模型直接操控本机 UI 的代理开发者
- 需要可控授权与观察-动作链路的桌面自动化场景