Redpanda растянула один потоковый кластер на три Kubernetes

В Redpanda Operator 26.2 появился Stretch Cluster: единый Kafka-совместимый кластер можно распределить между несколькими Kubernetes-кластерами, регионами или ЦОДами.

Данные синхронно реплицируются через Raft. При отказе площадки выбираются новые лидеры, а клиентам не нужно менять адрес кластера или переносить смещения потребителей. Отдельную Raft-группу образуют даже операторы Kubernetes, чтобы управляющий слой не стал единой точкой отказа.

Для инженеров это автоматическое переключение с нулевой потерей подтверждённых записей вместо двух независимых кластеров и асинхронной репликации. Но нужны минимум три Kubernetes-кластера и Enterprise-лицензия; Tiered Storage и Iceberg-топики пока не поддерживаются.

#redpanda #kafka #kubernetes #streaming #raft #highavailability #dataengineering

@data_engi