Вчера после работы сразу пошел на тренировку и вернулся домой под ночь, вот ничего и не писал🤷‍♂️
По драйверу в целом все ок, осталось дерево. Плюсом друг согласился переработать код геймпада, чтобы корректно приходили значения для sdl2.