Højskolen er opført på samme sted i Spurvevænget (del af bymarken) hvor Nysted franciskanerkloster tidligere havde ligget.[3]
I Januar 1904 solgtes Højskolen til Dyrlæge Hansen i Nysted for 14.000 Kr. Efterfølgende har bygningerne tjent som dyrlægeklinik i nogle år.
I 1960erne var der på stedet en mindre metalvirksomhed, der lod en gymnastiksal rive ned. Senere var der skydebane for en lokal skytteklub og lokaler for de blå spejdere,
Nysted Efterskole har siden overtaget bygningerne,[3] men i dag ligger den tiloversblevne bygning tom og forsømt.[4]