🌟 Apple представила модель Ferret-UI

Благодаря мультимодальным Lms улучшилось понимание мобильного интерфейса

Ferret-UI демонстрирует отличное понимание экранов пользовательского интерфейса и способность выполнять открытые инструкции.

Ferret-UI превосходит не только большинство MLLM с открытым исходным кодом, но и GPT-4V по всем элементарным задачам оценки и создания пользовательского интерфейса.

https://huggingface.co/papers/2404.05719