⚡ LMMs-Engine ⚡ - это лёгкий, модульный и гибкий фреймворк для обучения унифицированных моделей, поддерживающих несколько типов данных (текст, изображение, звук и др.).

💡 Что делает:
- Работает с мультимодальными входами и выходами - от autoregressive и diffusion-моделей до гибридных архитектур.
- Поддерживает унифицированные модели вроде BAGEL, где разные типы данных обрабатываются одной сетью.
- Ориентирован на исследователей и инженеров, кому нужно быстро экспериментировать и масштабировать обучение.
- Простая структура кода — можно легко адаптировать под свои пайплайны и GPU-кластер.


Современные LMM (Large Multimodal Models) требуют единого подхода к данным. LMMs-Engine решает эту задачу - одна платформа для всего цикла: от прототипа до тренировки на уровне лаборатории.

Репозиторий: https://github.com/EvolvingLMMs-Lab/lmms-engine