Технологии, деньги и рынки — первыми

esp32-iphone-agent: ИИ-агент, управляющий реальным iPhone через ESP32-S3 и AirPlay без Mac и аккаунта разработчика.

ИИ-агент, управляющий реальным iPhone через ESP32-S3 и AirPlay без Mac и аккаунта разработчика.

esp32-iphone-agent: ИИ-агент, управляющий реальным iPhone через ESP32-S3 и AirPlay без Mac и аккаунта разработчика.
Иллюстрация: GitHub

Главное в цифрах

  • Звёзд на GitHub: 950
  • Язык: Python
  • Лицензия: MIT

Чем полезно

Позволяет ИИ-модели видеть и трогать экран iPhone через зеркалирование AirPlay и USB HID, без Xcode, WebDriverAgent и джейлбрейка. Работает в любых приложениях, включая игры, так как видит только пиксели.

Главные возможности

  • Зрение через AirPlay, управление через USB-мышь и клавиатуру на ESP32-S3
  • Работает с любой OpenAI-совместимой vision-моделью, включая локальные
  • Проверяет результат каждого действия и повторяет промахнувшиеся нажатия

Для кого

Разработчики и энтузиасты, которые автоматизируют iPhone с помощью ИИ

Как начать

cd server && python3 -m venv .venv && .venv/bin/pip install -e .

Источник: GitHub
GitHub-находки
Такие новости первыми, в Telegram
Подписаться