YT/YTsaurus: база данных на максималках?

В прошлом посте я свалил в один блок DWH, ClickHouse и YT. Разберемся, что из этого что.

YT (сейчас YTsaurus) - распределенная платформа для хранения и обработки больших объемов данных, изначально разработанная в Яндексе.

Если совсем упростить, обычная база отвечает на запрос: дай мне эти данные. YT решает задачу шире: где хранить огромный объем данных и как параллельно обработать его на множестве машин.

Внутри поэтому есть и хранение таблиц, и вычисления над ними. Например, аналитик может взять миллиарды событий пользователей, отфильтровать нужные, объединить с заказами и посчитать метрику.

Отсюда и связь с прошлым постом:

YT - платформа хранения и вычислений
DWH - концепция аналитического хранилища
ClickHouse - СУБД для быстрых аналитических запросов
BI - инструменты, через которые результаты анализа доходят до человека

Поэтому фраза «данные лежат в YT» вполне нормальна, но описывает только часть возможностей YT

А еще поверх YT можно встретить YQL, CHYT и другие способы добраться до данных - но это уже следующий уровень кроличьей норы.

❤️ работал с YT
😈 моя распределенная система - Excel с презами по папкам

#pm #product #словарик #yt #ytsaurus #data