Когда рекомендации, поиск и реклама развиваются отдельно, появляются дублирующиеся пайплайны и расхождения в фичах.
В VK эту проблему решили через платформенный подход.
Stream Flow — центральный слой обработки событий — работает поверх YTsaurus. Он агрегирует до 1 млн событий в секунду и передаёт их в общий ML-профиль пользователей (~100 млрд событий в сутки).
Дальше — стандартная, но масштабированная схема:
Retrieval → Ranking → A/B → деплой.
Ключевое здесь — не только скорость запуска моделей, а снижение инфраструктурной вариативности: одна система хранения и обработки данных, единые механизмы расчёта фичей и унифицированный ML-цикл.
Это уже переход от набора ML-решений к платформенной архитектуре.
Post #1746
2.63K

- ❤ 7
- 👍 5
- 🔥 2