Родился в семье корсиканских эмигрантов без музыкальных корней, учился фортепиано и композиции у Альфреда Корто и Артюра Онеггера, в 1953–54 годах посещал класс анализа Оливье Мессиана. С конца 1950-х он развивал собственный метод работы со звуком — сохранять узнаваемый источник и повествование там, где официальная доктрина конкретной музыки требовала их стирать.
Я хотел вернуть в дискурс звук, который туда изначально не должен был попасть
— так сам Феррари формулировал задачу, определившую всю его последующую работу.