Настраиваем Apache Spark и работаем в нём эффективно 🔧

Наверняка многие из тех, кто работает с Apache Spark, сталкивались с тем, что доступных вычислительных ресурсов для запуска своего приложения бывает недостаточно.

В свежей статье Владислав Шевченко, Data Engineer в Альфа-Банке, разбирается, в чём состоит причина этой проблемы, и подробно разъясняет методы по её решению и недопущению.

Материал отлично подойдёт и тем, кто уже работал в Spark, и совсем новичкам. Читайте его целиком по ссылке на Хабре.