TGViewer
Agentic Engineer Agentic Engineer @data_engi · 686 subscribers
Post #1400 75
Redshift вынес материализованные представления в открытый Iceberg

5 октября AWS добавила в Redshift команду CREATE MATERIALIZED VIEW ... USING ICEBERG. Результат тяжёлого соединения или агрегации сохраняется как стандартная таблица Iceberg в S3. Её напрямую читают Athena, Spark, SageMaker и Glue — без экспорта данных и дублирующих конвейеров.

При обновлении Redshift отслеживает снимки Iceberg и пересчитывает только изменения для простых запросов, внутренних соединений и агрегаций SUM/COUNT. Оконные функции, внешние соединения, DISTINCT, MIN, MAX и AVG требуют полного пересчёта.

Для инженеров это единый слой предрассчитанных данных для нескольких движков. Ограничение: функция доступна только в Redshift Serverless и новых кластерах RG; прежние RA3 и DC2 её не поддерживают.

Пруф: AWS — 5 октября 2026 года

#amazonredshift #apacheiceberg #materializedviews #datalakehouse #aws #dataengineering

@data_engi
Amazon Materialize once, query anywhere: Introducing Iceberg materialized views in Amazon Redshift | Amazon Web Services Amazon Redshift now supports Iceberg materialized views. Compute an aggregation once in Amazon Redshift and store the result as a standard Apache Iceberg table in Amazon S3, queryable by Amazon Athena, Apache Spark, Amazon SageMaker, and AWS Glue. This post…
More from @data_engi
  1. Oct 6, 2026Агентный рантайм и LLM-сервер наконец научили разговаривать 🤪 5 октября исследователи пре…
  2. Oct 6, 2026Post #1399
  3. Oct 5, 2026@data_engi
  4. Oct 5, 2026С днём учителя! @data_engi
  5. Oct 5, 2026Промптом можно пролезть без очереди на LLM-сервере 😁 2 октября исследователи описали JIL…
  6. Oct 5, 2026Iceberg Kafka Connect перестал молча терять данные при ошибке записи 👈 В Apache Iceberg 1…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →