Le , il entra au Sénat et il s'associa au rétablissement de l'Empire. Dans le courant de la session de 1854, il fit une proposition tendant à présenter à l'empereur sur la publication d'un code rural.
Il fut le dernier châtelain du Château de Drancy qui avait appartenu à une Madame d'Argenlieu qui le vendit par la suite à un nommé Kirpatrick. Ce château fut construit en 1553 par Pierre Séguier dont la famille resta propriétaire pendant plus de deux siècles.
Il était l'époux d’Émilie-Victorine née Thibault devenue baronne de Ladoucette qui fonda en 1857 une école de filles avec ouvroir et cours d'adultes, dont le personnel enseignant était des sœurs de Saint Vincent de Paul. Elle mourut le à Cannes.
Elle avait fait un testament et don de tous ses biens en faveur de l'asile de Drancy pour parachever ainsi son entreprise caritative que géraient les Sœurs de Saint-Vincent de Paul.
Ces dernières héritèrent du château de Drancy et de son parc de 5,5 hectares, aujourd'hui le parc Ladoucette, ainsi que de la villa des Ladoucette à Cannes.
Le baron et la baronne de Ladoucette eurent une fille, Berthe de Ladoucette, née en 1844 devenue, comtesse Robert de Mun et décéda le , à l'âge de 21 ans. Elle avait collaboré aussi dans les œuvres de charité de sa mère.
Ayant perdu leur fille unique de bonne heure, ils léguèrent également par testament la plus grande partie de leur fortune aux départements de la Moselle et des Hautes-Alpes pour être employée à des œuvres d'utilité publique.
Sources
De Terentiacum à Drancy (1964), Georges Archer
Le château de Drancy, son histoire, « archives de Drancy » (1989)