На PyPI стали появляться первые сборки пакетов (wheel) для Linux-дистрибутивов на основе musl libc. То есть да, скоро в контейнеры на основе Alpine Linux вероятно можно будет перестать ставить кучу разных инструментов для сборки.

Но сильно не радуйтесь, потому что pip всё равно ещё не умеет ставить такие колёса.

Пока что я такое заметил только у cryptography: https://pypi.org/project/cryptography/35.0.0/#files

А вообще это PEP 656, и он уже принят, так что полная поддержка всеми нужными инструментами — теперь лишь вопрос времени: https://www.python.org/dev/peps/pep-0656/