DSH Plugins
返回列表
⚙️

tandem-agent-mouse

工作流 更新于 2026.11.11

在终端中运行以下命令:

dsh plugin install JiamingShi-JsPhys/tandem-agent-mouse

将以下提示词粘贴到 DeepSeek Harness 对话框中:

在 DeepSeek Harness 中执行 dsh plugin install JiamingShi-JsPhys/tandem-agent-mouse,即可从 https://github.com/JiamingShi-JsPhys/tandem-agent-mouse 安装该 Windows 桌面自动化 MCP 插件。

插件介绍

常见桌面自动化只能在「截图点坐标」与「抢鼠标、抢焦点」之间二选一,边工作边让 Agent 操作几乎不可能。tandem-agent-mouse 作为 Windows 上的 MCP 服务,把识别层建立在 UIA 无障碍树之上,并默认在后台读取窗口、截图与批量执行操作,从架构上避免动到你的真实光标和前台焦点。

核心能力体现在两套并行工具族:background_* 始终在用户桌面上以 background 方式工作,禁用的 Win32 API 在加载阶段即不可用;当后台无法可靠完成交互时,会诚实返回 needs_foreground,由你决定是否切换到 sandbox_*。B 模式在隐藏的第二桌面上运行 Agent 应用,右下角投影窗仅供观看与轻量介入,输入经窗口消息注入,沙箱进程树由 Job Object 保证关闭后不留孤儿进程。

适合已在使用 Claude Code、Claude Desktop 或其他 MCP 客户端、需要在 Windows 10/11 上让 AI 代劳本地应用操作、又不愿暂停自己工作的开发者与高级用户。若你经常处理 Chromium/Electron 窗口、需要可审计的结构化元素表而非纯视觉猜点,这款插件的定位会比传统 RPA 更贴近 Agent 工作流。

使用场景

  • 在写文档或开会时让 Agent 后台读取窗口并批量点选、填表
  • 浏览器或 Electron 应用需要结构化元素表而非截图猜坐标
  • 后台 UIA 无法点击网页内容时,改用沙箱投影在独立桌面完成流程

适合人员

  • 在 Windows 上使用 Claude 或其他 MCP 客户端的开发者
  • 需要本地 GUI 自动化但不愿被抢鼠标和焦点的进阶用户
  • 做 Agent 工作流、希望操作可审计且不扰人的团队