В 1755 году ещё будучи послом в Стамбуле Вержен был посвящён в Le Secret du Roi. Исполняя поручение Людовика XV, он успешно сагитировал Порту на войну с Россией, и теперь ему предстояло ответственное задание в Стокгольме. Перед отъездом придворный банкир Версаля Николя Божон вручил Вержену два миллиона ливров на оперативные расходы.
В 1774 году после смерти Людовика XV кабинет Le Secret du Roi был официально расформирован. Однако реально вся корреспонденция и агентурная сеть перешли в ведение Вержена. Людовик XVI по достоинству оценил успехи графа в Швеции и назначил его своим
На новом посту Вержен склонил короля принять открытое участие в войне с Англией на стороне Северо-Американских Штатов. До этого агенты Le Secret du Roi два года тайно выстраивали логистику снабжения американских повстанцев оружием и добровольцами из Старого Света.
Смерть Вержена в 1787 году символически совпала с началом революционных событий во Франции. Его старший брат Жан, так же служивший на дипломатическом поприще, был казнён во времена террора.