DSH Plugins
返回列表
🧰

dsh-xiangwriter-screen-control

联网工具 更新于 2026.10.18

在终端中运行以下命令:

dsh plugin install xiangwriter-dev/dsh-xiangwriter-screen-control

将以下提示词粘贴到 DeepSeek Harness 对话框中:

在 DeepSeek Harness 中执行 dsh plugin install xiangwriter-dev/dsh-xiangwriter-screen-control,或从 https://github.com/xiangwriter-dev/dsh-xiangwriter-screen-control 获取源码后于设置 → 插件 → 安装 bundle 选择目录;安装后下一轮对话即可使用 Screen Control 工具。

插件介绍

在 Windows 上,智能体往往只能读文件、调 API,却碰不到你正在用的桌面。dsh-xiangwriter-screen-control 把「看屏、点鼠标、敲键盘、读界面结构」收进 DeepSeek Harness 的一等工具里,让代理像人一样操作真实会话里的窗口,而不必再搭 MCP 或额外编译环境。

核心是六类 screen_* 能力:全桌面或单窗口截图(含被遮挡窗口)、指针点击拖拽与滚轮、Unicode 与组合键输入、窗口列举与聚焦、UI Automation 树文本化,以及等待界面变化。支持图像的模型可把截图作为真实图像块提交;纯文本路由仍可通过路径与元数据配合 screen_ui 工作。

安全与成本也写进设计:桌面输入默认经 inputPolicy 审批,Ctrl+Alt+Esc 可紧急暂停输入;工作进程本地串行处理、不触网。适合需要在 Win10/11 交互式桌面上做自动化验证、办公流程辅助或「先看清再动手」场景的开发者和高级用户;锁屏、高完整性窗口与无自动化树的应用仍有 README 所述限制。

使用场景

  • 让代理打开记事本输入内容并截图核对结果
  • 在真实窗口上先截屏再点击、拖拽完成多步操作
  • 用 UI Automation 树定位控件,减少纯坐标猜点

适合人员

  • 在 Windows 10/11 交互式桌面上使用 DeepSeek Harness 的用户
  • 需要桌面级自动化或验收流程的开发者
  • 接受输入审批、愿承担截屏隐私风险的进阶用户