Adler ohjasi Cheech and Chongin ensimmäisen elokuvan Up in Smoken vuonna 1978. Hänen yksityiselämäänsä seurattiin 1960–1970-lukujen Yhdysvalloissa varsin tiiviisti, ja tiedotusvälineet uutisoivat hänen suhteistaan ainakin Jill Gibsoniin, Tina Sinatraan, Peggy Liptoniin ja Michelle Phillipsiin. Hänelle ja näyttelijä Britt Eklandille syntyi vuonna 1973 poika. Adler oli mennyt vuonna 1964 naimisiin Shelley Fabaresin kanssa ja tuotti useita hänen laulujaan. Pariskunta oli kuitenkin asunut erillään jo vuodesta 1966 ja otti virallisenkin avioeron vuonna 1980.