vc: Яндекс выложил в открытый доступ YTsaurus Flow – технологию для непрерывной обработки больших потоков данных

– Технология YTsaurus Flow обрабатывает клики, лайки и другие события
– Обработка событий в интернете идет по мере их появления
– Алгоритмы быстрее замечают изменения интересов пользователей и др.
– Технология позволяет точнее рекомендовать товары, фильмы и др.
– Отмечается, что YTsaurus Flow помогает распознавать действия мошенников
– Обычно такие данные накапливают и обрабатывают с большой задержкой
– YTsaurus Flow выложена под лицензией Apache 2.0, код был выложен на GitHub
– С помощью решения можно готовить данные для обучения ML-моделей
– YTsaurus Flow помогает обновлять информацию для сайтов, приложений и др.
– Также технология помогает считать просмотры, клики, заказы и др.
– Решение рассчитано на высокую нагрузку, данные не теряют и не дублируют
– Яндекс Маркет использует YTsaurus Flow для быстрого сбора статистики
– Технология также помогает антифроду Яндекса выявлять злоумышленников
– «Реклама» использует решение для подборки интересных предложений

@ftsec