开始使用
一部 iPhone,两种用法。
在手机上使用 Handsy,或让电脑上的 Agent 通过同一块板子操作。
让你的 Agent 用上 iPhone。
Handsy CLI 通过蓝牙连接电脑与板子,让你的 Agent 查看真实手机截图,执行点按、滑动和输入。
CLI 发布准备中。
以下命令用于即将发布的版本。安装前,请让 Agent 先检查版本是否可用。
让 Agent 先通过蓝牙找板子、配对。即将提供的固件 v0.2.2 与新版 CLI 支持用 esp32agent wifi 读取热点信息,再到手机设置里连 Wi-Fi、开启屏幕镜像和辅助触控,不需要手机 App。 手机连接步骤
1. 安装 CLI
curl -fsSL https://handsy.tech/install.sh | shirm https://handsy.tech/install.ps1 | iex2. 把设置交给你的 Agent
复制这段请求给能使用本地终端的 Agent。它会先检查发布状态,再找板子、配对,并截图确认连接。
自己接入 Agent
CLI 安装完成后,选择你使用的客户端,查看对应的 MCP 命令。
claude mcp add esp32agent -- esp32agent mcpcodex mcp add esp32agent -- esp32agent mcp其他 MCP 客户端可按 CLI 指南中的通用 stdio 设置接入。能使用终端的 Agent,也可以按同一份指南直接调用 CLI。
工作原理
一块板子,两种思考方式。
板子是眼睛和手。大脑可以是 iPhone 上的 App,也可以是电脑上的 Agent。
它能看到屏幕
板子开启自己的 Wi-Fi,出现在“屏幕镜像”里。它通过蓝牙把 AirPlay 画面传给 App 或 CLI。
它像你一样点按
插到 USB-C 口上,板子就是一个普通的鼠标和键盘。打开“辅助触控”后,点击就是轻点,拖动就是滑动。
用 App,也能接入 Agent
让 iPhone App 规划下一步,或通过 CLI 接入电脑上的 Agent,让它查看截图并操作手机。
X 与媒体报道
看它运行,以及谁在讨论它。
一块 40 元的 ESP32,就能让 AI agent 控制一部原装 iPhone。就这些。 ……ESP32 接收 iPhone 的 AirPlay 画面,再通过 USB 点按回去。我们还做了一个很可爱的 agent App,和 ESP32 配合,自动操作任何 iPhone。 显示更多

一块 40 元的 ESP32,就能让 AI agent 控制一部原装 iPhone。 不需要 Mac,不需要越狱,不需要开发者模式。只要一台 Linux 机器。 这个演示不用任何云端 API:Qwen3.8-Flash-Next 在 2 台 DGX Spark(TP=2)上本地运行,一切都留在我的局域网里。 开源 👇

一个会用真实 iPhone 的 AI,一块 40 元的板子就是它的眼睛和手 📱 Henry Yuan 的 ESP32 iPhone Agent 运行在我们的 XIAO ESP32S3 上:手机把屏幕镜像到板子上,板子再作为 USB 鼠标点按回去。无需越狱。

AI 通过 ESP32 控制 iPhone
想让 AI agent 在 iPhone 上做点什么?你可以试着越狱,再做一大堆软件折腾;或者……直接拿一块现成的单片机。
