John Stuart era il membro di una famiglia che discendeva da John Stewart (1360-1449), sceriffo di Bute, figlio naturale di Roberto II di Scozia e della sua amante Moira Leitch. A John Stewart furono concesse da suo padre le terre di Bute, Arran e Cumbria. Egli era conosciuto come il Black Stewart, a causa della sua carnagione scura, mentre suo fratello John Stewart di Dundonald era conosciuto come il Red Stewart.
Ascesa
Nel 1385 a John Stewart di Bute venne concessa dal padre Roberto II la carica ereditaria di Sheriff of Bute. John Stewart morì nel 1449, all'età di 89 anni. Durante il regno di Maria, regina di Scozia, la famiglia adottò l'ortografia di 'Stuart', che la regina aveva usato mentre viveva in Francia. James Stuart, discendente dal Black Stewart, venne nominato Baronetto di Bute della Nuova Scozia, il 28 marzo 1627.
Entrambi ebbero come successore il loro primogenito. Nel 1766 sposò Charlotte Jane, figlia ed erede di Herbert Windsor, II visconte Windsor, figlio di Thomas Windsor, I visconte Windsor e di sua moglie Lady Charlotte. Attraverso questo matrimonio vasti possedimenti nel sud del Galles entrarono nei possedimenti della famiglia Stuart.
Nel 1776 venne elevato a pieno diritto tra i Pari di Gran Bretagna, come Barone di Cardiff in riconoscimento delle sue proprietà sostanziali gallesi. Nel 1796 venne ulteriormente onorato quando fu nominato conte di Windsor e visconte Mountjoy, nell'Isola di Wight e Marchese di Bute. Il figlio maggiore di Lord Bute ed erede, John Stuart, sposò Lady Elizabeth Penelope.
XIX secolo
Il figlio maggiore, Lord Mount Stuart, succedette al nonno materno come settimo Conte di Dumfries nel 1803, e a suo nonno paterno come secondo Marchese di Bute nel 1814. Nel 1805 assunse, in base alla licenza Reale, il cognome aggiuntivo di Crichton prima di Stuart. Gli succedette il suo unico figlio. Era un antiquario, studioso, filantropo e mecenate dell'architettura e ricoprì anche la carica di Lord luogotenente di Buteshire.