Формат Apache Iceberg обеспечит простоту выполнения запросов с использованием популярных движков: Amazon Athena, Amazon EMR и Apache Spark.
Основные особенности Amazon S3 Tables:
➖ Оптимизация производительности: по сравнению с самостоятельно управляемыми таблицами, S3 Tables обеспечивают до 3 раз более высокую производительность запросов и до 10 раз больше транзакций в секунду.
➖ Упрощенное управление: S3 Tables автоматически выполняют задачи обслуживания: компактизация файлов, управление снапшотами и удаление неиспользуемых файлов.
➖ Интеграция с аналитическими сервисами AWS: S3 Tables легко интегрируются с Amazon Athena, Amazon Redshift и Amazon EMR, а также с популярными инструментами с открытым исходным кодом.
➖ Упрощенное управление доступом: таблицы — полноценные ресурсы AWS, что позволяет применять к ним политики доступа и упрощает управление безопасностью данных.
Amazon S3 фактически станет аналитической СУБД с особым хранилищем на котором будут храниться данные в формате Iceberg — лучший вариант для организации даталейков.
@DevOpsKaz 😛