Han overtok gården Bortstu Hornset da faren, lensmann Tollef Tollefsen senior døde i 1860, og drev den til han i 1880 solgte til Jens Simensen Høye (f 1851), som var gift med Tollefs brordatter Marit.[2] Tollef eide også gården Asphaugen på Bergset som han kjøpte i 1878. Denne solgte han i 1888 til søstersønnen Tollev Edvardsen Hornset.[5][6] Han var særlig interessert i hesteavl.[2]
Han var ugift. Han var også så tunghørt at han ba seg fritatt for ordførervervet, uten å få gehør for det.[2]