Ölanderin vanhemmat olivat tullitarkastaja Victor Emil Ölander ja Regina Hedman ja puoliso vuodesta 1924 Hildur Elvira Lohman. Toimittaja, ohjelmajohtaja Ragnar Ölander oli hänen veljensä. Victor Ölander tuli ylioppilaaksi 1915 ja valmistui filosofian kandidaatiksi 1921 ja lisensiaatiksi 1928. Filosofian tohtoriksi hän väitteli 1932. Uransa alkuvaiheessa Ölander toimi Helsingin yliopiston tähtitornin vt. observaattorina ja geodeettisen laitoksen nuorempana valtiongeodeettina. Hän osallistui myös Suomen valtion rajankäynteihin itärajalla 1940 ja Porkkalassa 1944.[3][4]