computer-user
在终端中运行以下命令:
dsh plugin install jing-hy/computer-user
将以下提示词粘贴到 DeepSeek Harness 对话框中:
执行 dsh plugin install jing-hy/computer-user 即可安装,完整源码地址为 https://github.com/jing-hy/computer-user 。
插件介绍
纯文本大模型天生看不到屏幕,更无法操控鼠标键盘。computer-user 正是为此而生:它让 DeepSeek Harness 中任何纯文本模型通过全屏截图与本地 OCR 理解桌面内容,再驱动 Windows 完成点击、输入、拖拽、滚轮滚动等操作,全程无需多模态模型或外部视觉 API。
核心能力覆盖完整操作闭环:多显示器 DPI 感知截图、UTF-16 中文输入、快捷键组合、鼠标拖动、滚轮滚动、光标读取与定时等待。搭配 picturereader 的本地 image_scan 与 image_ocr,模型可执行定位目标窗口、窗口内 OCR、点击一次、截图验证的可靠工作流。设置面板提供禁用、只读、手动审批、自动四种模式,并内置输出守卫,防止模型将工具调用误写为对话文本。
适合在 Windows 桌面运行 DSH 且希望以纯文本模型完成自动化操作的用户:批量表单填写、应用界面巡检、完全离线的 GUI 工作流,即装即用。
使用场景
- 用纯文本模型自动填写桌面表单并完成应用界面操作
- 构建完全离线的 GUI 巡检与截图分析流水线
- 在无多模态能力的环境下让模型看见并操控 Windows 桌面
适合人员
- 在 Windows 上运行 DeepSeek Harness 并需要自动化桌面操作的用户
- 受限于纯文本模型、无法调用外部视觉 API 的开发者
- 追求完全本地、零云端调用的离线工作流建设者