Anthropic и OpenAI это упустили

В open source вышел CUA - единый SDK, который даёт ИИ-агентам мышь, клавиатуру, экран и доступ к shell на macOS, Linux и Windows.

Один и тот же код может управлять локальной виртуальной машиной или облачной песочницей независимо от операционной системы.

Что умеет CUA

- видеть содержимое экрана
- кликать и печатать как обычный пользователь
- выполнять shell-команды
- запускать тесты на OSWorld и ScreenSpot
- экспортировать траектории для обучения моделей
- работать почти с нативной производительностью на Apple Silicon

Больше не нужен отдельный SDK для каждой ОС и сложная инфраструктура для запуска компьютерных агентов.

Проект полностью бесплатный и открытый:

🔗 https://github.com/trycua/cua