Era il figlio del principe Vasilij Ivanovič Gagarin. Dopo la morte del padre, rimase l'unico rappresentante del maggiore dei due rami principali della famiglia Gagarin.
Venne ammesso alla corte della principessa Anna Leopol'dovna e venne nominato ciambellano, carica che ricoprì anche alla corte dell'imperatrice Elisabetta. Il 20 marzo dello stesso anno venne nominato assistente del duca di Holstein, Pietro Ulrico, appena dichiarato erede al trono russo.
Il 2 luglio 1762, Caterina II gli conferì la carica di Magister equitum, e nello stesso anno, fu nominato membro della commissione per i beni ecclesiastici. Il 1º marzo 1765 fu nominato senatore e il 5 marzo dello stesso anno, divenne presidente del Collegio dell'economia, ma tenne la carica per un solo anno.
Nel 1773 si stabilì a Mosca in una casa di lusso costruita per lui da Matvej Fëdorovič Kazakov ed ivi morì nel 1782.
Era un grande appassionato di giardinaggio e agricoltura.
Matrimonio
Nel 1738 sposò la contessa Praskov'ja Pavlovna Jagužinskaja. Ebbero otto figli: