В 1827 году герцог женился на 50-летней актрисе и вдове банкира Гарриет Меллон[2]. После её смерти (1837) он вступил во второй брак — с Элизабет Губбинс, дочерью генерал-майора Джозефа Губбинса[3]. Вторая жена родила сына Уильяма (1840—1898), ставшего 10-м герцогом Сент-Олбансом[4], и двух дочерей: Диану (1842—1905), жену сэра Джона Хаддлстона[5], и Шарлотту (1849 — ?), жену Лайонела Гарсайда[6].