Han var utdannet ved Kristiania tekniske skole, og tok eksamen i 1910.[4] Han hadde deretter flere studieopphold i utlandet. Berger arbeidet først hos Akers mekaniske verksted, før han ble bilsakkyndig hos Aker politikammer. Fra 1929 drev han eget konsulentselskap, Bergers Havaribyrå. Dette selskapet drev med sakkyndig bistand til personer som havnet i biluhell eller bilulykker.[5][6] Han var også i flere år konsulent for Industriforsyningsdepartementet, og var oppnevnt av staten som sakkyndig for mange offentlige komiteer. Berger underviste også ved Kristiania Tekniske Aftenskole og Nordstrand tekniske aftenskole.[7]
Som ung mann var han aktiv i idrettsbevegelsen, både som leder og utøver.[5] Han var blant annet bokser, og representerte Kristiania Boxeklub. Han tok gull i tungvekt i NM 1909, etter å ha slått Jacob D. Løvaas på teknisk knockout i andre runde.[8][9]
I 1955 ble Berger dømt for boligsvindel i en mye omtalt straffesak. Han hadde solgt andeler i et fremtidig boligprosjekt på Nordstrand i Oslo, men bare tatt innskuddene fra de ca. 30 kjøperne uten å noensinne sette i gang bygging av noen hus. Han underslo i alt 142 000 kroner, og ble dømt til ett og et halvt års fengsel.[10][11][12]