Из-за болезни Питт быстро утратил контроль над правительством и фактическим главой кабинета оказался Чарльз Таунсенд. Действуя в интересах короля и вопреки мнению остального кабинета, Таунсенд принял ряд жёстких мер в отношении Североамериканских колоний, в том числе провёл через парламент Законы Таунсенда[англ.], которые вводили пошлины на ввозимые в колонии товары. Историк Джон Фиск называл политику Таунсенда главной причиной начала Американской революции. Таунсенд умер в том же 1767 году, но король Георг III продолжил его политику и стал, по выражению Фиска, «сам себе премьер-министр». После смерти Таунсенда его место в кабинете занял Фредерик Норт, и теперь он в основном влиял на работу кабинета.
В 1768 году Уильям Питт подал в отставку и его место главы правительства занял герцог Графтон.
Первый кабинет маркиза Рокингема работал в те дни, когда американские колонии протестовали против Гербового акта. Рокингем добился отмены акта, и принял Пояснительный акт[англ.], который заявлял о праве парламента вводить налоги в колониях. Этот закон был принят в основном для сохранения лица, и предполагалось, что он останется только на бумаге. Король Георг III всё меньше доверял политике Рокингема и намеревался вернуть в кабинет Уильяма Питта Старшего, но тот соглашался вернуться только на определённых условиях, которые не устраивали Рокингема. В итоге в июле 1767 года Рокингем подал в отставку и новым главой правительства стал Питт[1].
Король поручил Питту формирование правительства 7 июля 1766 года. Питт ещё ранее утверждал, что хотел бы создать такое правительство, которое устраивало и короля и общество, и в котором не было бы партийных разногласий. «Люди устали от наших споров», говорил он. Впоследствии кабинет Питта часто описывался как внепартийное правительство, хотя он таковым не являлся. В него не попали сторонники Бедфорда и сторонники Гренвилла. Питт создал коалицию своих сторонников, сторонников лорда Бьюта и лорда Рокингема. Правительство получилось бы более эффективным, если бы Питт включил в него лорда Гренвилла, но тот наверняка отказался бы от такого предложения. В результате, вместо того, чтобы стать правительством всех партий, правительство Питта оказалось в конфликте со всеми ими[2].