Lagmansö omtalas i dokument första gången 1336 ("Lagmanzhøø") och var sätesgård för riksrådetSigge Magnusson av Vinstorpaätten 1336–1358. Han ägde även en mängd andra gårdar i Södermanland. Lagmansö var senare sätesgård för hans dotterdotters make Ulf Bengtsson (Sparre av Hjulsta och Ängsö) 1392, dennes svärson Gustav Algotsson (Sture, sjöbladsätten) 1433 och den sistnämndes dotter Elin Gustavsdotter Sture 1475. Göran Åkesson (Tott) som avled 1555 gav den 1544 som morgongåva till sin hustru Kristina Larsdotter (Sparre av Rossvik), som senare bodde här som änka och senare med sin andre make Måns Pedersson (Lilliehöök) som avled 1562.[1]
Under Lagmansö lydde 1544 gårdarna Österö i Vadsbro socken, Källsta, Lundby, Nykvarnstorp, Trollebo, Vedbo och Åkfors i Bettna socken, Harpebol och Kulltorp i Björkviks socken, Boxholmen, Brebol, Kämbol, Rosendal, Spånga, Stockbäcken, Sund och Älskebol i Lerbo socken, Forssjökvarn, Råstock, Skräppetorp och Stenta i Malms socken, samt Händö och Röl i Dunkers socken.[1]