Zijn capaciteiten op bestuurlijk gebied, die liet hij zien in het bestuur van Franche-Comté rond 1775, leidden tot zijn benoeming tot minister van Oorlog in 1780. In deze functie creëerde hij in 1783 de permanente generale staf en zette zich in voor de kwaliteit van militaire barakken en militaire hospitalen. Op 13 juni1783 werd hij benoemd tot maarschalk van Frankrijk. In 1787 nam hij ontslag.
Tijdens de Terreur werd Ségur gevangengezet in de La Force gevangenis. Na zijn vrijlating werden zijn adellijke titels van hem afgenomen, totdat hij door Napoleon in 1800 werd gerehabiliteerd. In het daaropvolgende jaar overleed hij in Parijs.
