dsh-desktop
在终端中运行以下命令:
dsh plugin install Hyna-hla/dsh-desktop
将以下提示词粘贴到 DeepSeek Harness 对话框中:
在 DeepSeek Harness 终端执行 dsh plugin install Hyna-hla/dsh-desktop 即可安装该桌面控制插件,源码仓库:https://github.com/Hyna-hla/dsh-desktop
插件介绍
当 AI 模型只能看到网页正文,却点不了地址栏、切不了窗口、拖不动文件时,真正的桌面自动化就无从谈起。dsh-desktop 解决这个问题:它把宿主操作系统的完整桌面能力暴露给模型,让浏览器框架、搜索栏和任意应用程序都成为可交互对象,与只管页面内容的浏览器扩展形成互补。
核心能力围绕一组原子工具展开:截屏后调用 Windows 自带 OCR 返回每个词语的坐标框,模型据此精确定位点击目标;支持左、右、中键单击与双击,也支持按住拖动;能输入含中文在内的 Unicode 文本;还能发送 ctrl+l、alt+tab、f5 等任意组合键。一个典型流程是:发送 ctrl+l 聚焦地址栏 -> 输入网址 -> 按 enter 打开;遇到未知界面则先截屏 OCR 找坐标再点击。
适合两类人:一是希望给 AI 助手完整桌面控制权、又不想搭建复杂 RPA 脚手架的开发者;二是需要模型自主完成跨应用操作(如从文件管理器拖文件到编辑器、在多个窗口之间切换)的自动化场景。由于工具运行在宿主进程、不受沙盒限制,权限较高,模型仅在你明确下达指令时才会调用这些工具。
使用场景
- 模型自主完成跨应用操作,如从文件管理器拖入编辑器
- 用组合键快速聚焦地址栏并打开指定网址
- 对未知界面先截屏OCR定位再点击目标按钮
适合人员
- 希望给AI助手完整桌面控制权的开发者
- 需要跨应用自动化但不想搭RPA脚手架的工程师
- 构建智能桌面助手的个人与团队