🖼️ Airflow получил официальный провайдер ClickHouse

17 сентября вышел apache-airflow-providers-clickhousedb 1.0.0. Раньше для связи Airflow с ClickHouse обычно использовали сторонний плагин или собственный код; теперь интеграция размещена в реестре Apache Airflow и поддерживается ClickHouse.

Обычные SQL-запросы выполняются стандартным SQLExecuteQueryOperator. Для пакетной загрузки, потоковой записи и специальных возможностей ClickHouse предусмотрен ClickHouseHook, использующий нативную колоночную вставку.

Для инженеров это меньше самописной обвязки и более простой перенос DAG между своим Airflow и управляемыми платформами. Нюанс: провайдер пока имеет статус incubation и требует Airflow 2.11+ и Python 3.10+.

Пруфы:
🔘ClickHouse — 17 сентября 2026 года
🔘реестр Apache Airflow

#apacheairflow #clickhouse #dataorchestration #datapipeline #etl #dataengineering

@data_engi