phone-eye
在终端中运行以下命令:
dsh plugin install boheastill/phone-eye
将以下提示词粘贴到 DeepSeek Harness 对话框中:
在 DeepSeek Harness 终端中执行 dsh plugin install boheastill/phone-eye 即可安装该插件,完整源码见 https://github.com/boheastill/phone-eye
插件介绍
你给 AI agent 写代码、跑测试,但它始终碰不到那块真实的手机屏幕。游戏画面、弹窗、动态图片,无障碍树根本看不见;纯靠截图识别又经常点歪坐标。phone-eye 解决这个问题:把视觉模型和 Android UI 树融合在一起,让 agent 既看懂屏幕内容,又精确定位每个元素的坐标。
核心能力涵盖:截图并理解屏幕、点击与滑动、ASCII 文本输入、硬件按键(唤醒、返回、Home、多任务)、通过 Android intent 直接打开任意页面、保存截图到磁盘。首次 USB 连接后自动切换为 Wi-Fi adb,之后无需再插线,电脑重启也不影响连接。支持同时挂载多台手机,各走独立进程互不干扰。
适合正在用 Claude Code、Codex、Cursor 等 MCP 客户端做移动端 Web QA、表单回归测试、OEM 向导自动化、或无人值守夜间监控的开发者。无需在手机上安装任何应用,无需 root,无需额外服务器。带上任意一个视觉模型(OpenAI、GLM、本地 Qwen-VL 均可),花六十秒完成开发者选项授权,剩下的就交给 agent。
使用场景
- AI agent 在真机上验证移动端 Web 页面的交互与渲染
- 无人值守夜间监控:自动唤醒、解锁、检查屏幕并截图存证
- 表单回归测试:自动填写、提交、截图对比,覆盖 OEM 弹窗
适合人员
- 使用 Claude Code / Codex / Cursor 等 MCP 客户端的移动端开发者
- 需要真机自动化但不想 root 或安装额外 App 的测试工程师
- 搭建无人值守设备监控流水线的独立开发者或小型团队