Victor Lytton oli Intian varakuninkaana toimineen Robert Lyttonin poika ja syntyi Intiassa. Hän kävi Etonin poikakoulua sekä Trinity CollegeaCambridgessä ja peri alaikäisenä isältään Lyttonin jaarlin arvon. Lytton toimi amiraliteetin palveluksessa ensimmäisen maailmansodan aikana, Intian asioiden alivaltiosihteerinä vuosina 1920–1922 sekä Intiassa Bengalin kuvernöörinä 1922–1927. Kuvernöörikautenaan hän toimi ajoittain myös virkaatekevänä Intian varakuninkaana varsinaisen varakuninkaan ollessa virkavapaalla.[1]
Lordi Lytton johti vuonna 1932 Lyttonin komissiona tunnettua Kansainliiton valtuuskuntaa, joka pyrki selvittämään MantšuriassaKiinan ja Japanin välille puhjenneen konfliktin syitä. Komission laatima nk. Lyttonin raportti tuomitsi Japanin hyökkääjänä ja sai ulkomailla myönteisen vastaanoton, mutta se ei johtanut tehokkaisiin toimiin Japanin rankaisemiseksi. Toimittuaan vielä useissa muissa tehtävissä Lytton jäi eläkkeelle vuonna 1945.[1]