Mesteparten av bebyggelsen består av trehus fra 1700- og 1800-tallet, men det er også innslag av murbebyggelse fra 1859 og fremover. Mye av bebyggelsen ble istandsatt de siste tiårene av 1900-tallet. 53 bygninger her omfattes av spesialområde bevaring.[2]
Navnet Bergfjerdingen er registrert brukt i 1767, før den tid var området kjent som «Under Aggersberg». Husene her var særdeles små og trangbodde, og i 1865 bodde det 500 mennesker her, med opptil 18 personer i samme hus. Flesteparten av beboerne var håndverkere og industriarbeidere.[1]