Materijal za album sniman je u Gayevom privatnom studiju 'Marvin's Room' (Los Angeles, Kalifornija), 'Seawest Recording Studio' (Honolulu, Hawaii) i Odyssey Studios (London, Engleska) u periodu 1979. do 1980. godine[1]. Omot albuma dizajnirao je Neil Breeden, koji je također radio omot reperu Dazu Dillingeru na njegovom prvom studijskom albumu Retaliation, Revenge & Get Back. Ovo je Gayev posljednji album kojeg snima za izdavačku kuću 'Motown Records', nakon kojeg prelazi u 'Columbia Records'. Album je podsjećao na komercijalni neuspjeh dvostrukog LPHere, My Dear, koji je autobiografski i govori o njegovom nesretnom braku sa Annom Gordy[2]. Album je u potpunosti napisao, producirao, aranžirao i miksao Marvin Gaye i njegov je odlazak iz disco stila, kojeg je koristio na prethodna dva studijska albuma. In Our Lifetime smatra se jednim od najbolje otpjevanih Gayevih albuma za 'Motown' u njegovom kasnom periodu.