Wink Pings

给AI一台云手机:粘贴URL就能点屏幕,但2FA还得你上

Phone Harness MCP 0.3.3把云上真实iPhone和Android接进Claude、ChatGPT、Cursor等支持MCP的agent。看屏幕、点击、输入、滑动都能做,演示很顺。真正要留意的是登录态、2FA和多agent抢一台手机。

Phone Harness 发布了 MCP 版本 0.3.3。任何支持 MCP 的 agent,现在可以控制云端的真实 iPhone 或 Android。MCP 是 Model Context Protocol,用来把模型或 agent 接到外部工具上。这次接入的手机不是网页里的演示器,是云上跑着的整台手机。

用法很轻。Claude、ChatGPT、Cursor、Codex 等工具里把它当 custom connector,粘贴一个 URL 并登录。agent 能看到屏幕,能点、能输入、能滑动。项目地址在 phone-harness/mcp,版本号 0.3.3。

连接方式分两种。iPhone 通过 iPhone Mirroring 接入,Android 用 adb。shawn 在回复里说,接上后 agent 立刻能访问手机,也可以自己找更高效的控制方式。有人问每次点击是不是都传原始画面,他回复说 phone-harness 会自我改进,想要 raw frames 可以返回,需要 accessibility tree 也能暴露。

这组能力放在移动端测试上很直接。shawn 说一个 agent 可以并行控制多台真实手机,会话能持久保留,适合移动 QA。多个 agent 协作控制同一台设备,他自己也觉得可能变得奇怪,还反问什么场景最合适。

边界也明显。有人问应用弹出 2FA 怎么办,shawn 回复会交回给用户。有网友担心登录状态留存:把手机交给别人会谨慎,交给 AI 反而容易松手。还有网友说,手机控制是很好的 MCP 测试,因为 agent 要行动、观察、恢复,失败模式比 demo 更有意思。另一位网友补了一句,那 20% 的失败通常来自应用要短信验证码。

演示里点几下很顺。真跑起来,卡住流程的往往是验证码、登录态和多 agent 抢设备。Phone Harness 把手机变成了 agent 可调用的工具,价值在测试和流程自动化,麻烦也在这些地方。

发布时间: 2026-11-03 21:02