Han konverterte til katolisismen i 1880 og tjenestegjorde som pavelig kabinettskammerherre. I 1889 ble han tildelt tittelen marki i arvelig utvidet primogenitur. Han kjøpte godset Tyresö med Tyresö slott i 1892, som han fikk bygget om av arkitekten Isak Gustaf Clason med nyskapt 1600-tallspreg i en nasjonalromantisk ånd. Deler av godset, Brevik, Tyresö, ble bygget ut som villaområde for velstående stockholmere. Etter hans død donerte enken i hans andre ekteskap, Mary Moore, slottet og slottsområdet til Nordiska museet, mens resten av godset ble oppdelt og frasolgt til bebyggelse.
Han var to ganger gift med amerikanske kvinner som begge var arvinger til betydelige formuer, første gang med Caroline Alice Maria Beatrice Claudia Russell (1854–1919[2]) den 6. mai1891 i Roma. Paret fikk tre sønner; Claes Leo Lagergren (1892–1961), marki, pavelig kabinettskammarherre, Johan Lagergren (1898–1975), greve, pavelig kabinettskammarherre, og Carl Lagergren (1899–1931), greve, løytnant.
De yngre sønnene Johan og Carl fikk gjennom adelsbrev 3. juni 1904 begge tittelen greve i vanlig primogenitur. I Sverige er slekten med i Ointroducerad adels förening, der marki- og greveslekten (etterkommere etter Johan) regnes som separate slekter.[3]