Пасля смерці Георга II у 1760 г. палац галоўным чынам засялялі прадстаўнікі малодшых галін кіруючай дынастыі. Менавіта тут нарадзілася каралева Вікторыя (пра што нагадвае помнік у садзе). Прынцэса Дыяна афіцыйна лічылася гаспадыняй гэтага палаца з моманту шлюбу ў 1981 г. да самай смерці ў 1997 г.
Цяпер гаспадарамі палаца з’яўляецца старэйшы сын Дыяны — Уільям і яго жонка Кетрын. Ён стаў іх першай афіцыйнай рэзідэнцыяй у Лондане пасля вяселля 29. 04. 2011 года, пасля чаго ім каралева прысвоіла тытул герцага і герцагіні Кембрыджскіх.