W 1826 r. został członkiem Tajnej Rady. W 1841 r. został Lordem Namiestnikiem Middlesex. W 1842 r. został kawalerem Orderu Podwiązki. Przez kilka miesięcy 1852 r. był Lordem Tajnej Pieczęci. W latach 1858–1859 pełnił funkcję Lorda Przewodniczącego Rady.
Rodzina
2 lutego 1821 r. poślubił Frances Gascoyne (ok. 1806 – 15 grudnia 1839), córkę Bambera Gascoyne’a i Sarah Price. James i Frances mieli razem czterech synów i dwie córki:
Mildred Arabella Charlotte Gascoyne-Cecil (zm. 18 marca 1881), żona Alexandra Beresforda-Hope’a, miała dzieci