Postgres превратили в переходник к ClickHouse

Платформа недвижимости QuintoAndar перестраивает обработку 900 млн событий в месяц от 14 млн пользователей. Раньше горячие данные обслуживал PostgreSQL, а холодный контур круглосуточно сводился в Databricks. Теперь события пишутся прямо в ClickHouse, который также обслуживает около 300 млн запросов API в месяц.

Проблема возникла с Hightouch: нужный режим сервиса не поддерживал ClickHouse. Команда подключила расширение pg_clickhouse, импортировала таблицы как внешние — и Hightouch увидел их как обычный PostgreSQL.

Соединения, фильтры и агрегации при этом проталкиваются в ClickHouse, а не переносят исходные данные в Postgres. Для инженеров это полезный архитектурный приём: Postgres-протокол может стать универсальным интерфейсом к аналитическому движку, когда сторонний инструмент не поддерживает его напрямую.

Пруф: ClickHouse и QuintoAndar

#clickhouse #postgresql #federatedquery #datapipeline #realtimeanalytics #dataarchitecture #dataengineering

@data_engi