Это прям судьба! Databricks раздает бесплатно книгу - Learning Spark V2. Офигенная книга, я по ней и изучал Spark год назад и буду ее использовать в модуле 7. Вам она точно пригодится!

PS Спасибо Денису Волку за наводку в slack.