iPhone 上的 ESP32 Agent

一个会用你 iPhone 的 AI。 亲手操作。

把一块 40 元的 ESP32 板子插到手机上。它通过 AirPlay 看屏幕,通过 USB 点按,App 决定每一步。无需越狱。电脑只在第一次刷写板子时用到。

iPhone App 即将上架 App Store

任务 设一个每天重复的早上 7:00 闹钟
正在看屏幕…1/12

你好,我是 agent。戳戳我。

点 · 双击 · 长按 · 拖动

工作原理

一部手机,一块板子。就这些。

板子是 agent 的眼睛和手,同一部 iPhone 上的 App 是它的大脑。

01 · 眼睛

它能看到屏幕

板子开启自己的 Wi-Fi,出现在“屏幕镜像”里。它把 AirPlay 画面原样通过蓝牙传给 App。

02 · 手

它像你一样点按

插到 USB-C 口上,板子就是一个普通的鼠标和键盘。打开“辅助触控”后,点击就是轻点,拖动就是滑动。

03 · 大脑

它在 App 里思考

App 把每张截图发给你选的视觉模型,规划下一步,并确认屏幕真的变了。

你需要什么

比一顿午饭还便宜。

板子

XIAO ESP32S3,约 40 元

也可以用任何带原生 USB 和 PSRAM 的 ESP32-S3。它开启自己的 Wi-Fi 接收屏幕,并充当鼠标。

手机

任何 iOS 18 的 iPhone

iPhone XS 或更新机型。USB-C 机型直接插上;Lightning 机型需要 USB 相机转换器。App 就在同一部手机上运行。

给你的 iPhone 装上一双手。