Sullivan sairastui lapsena trakoomaan. Hän näkövammautui, mutta sai useiden leikkausten seurauksena näkönsä osittain takaisin. Pienen Kellerin hän tapasi ensimmäistä kertaa 3. maaliskuuta 1887.[1]
Sullivan oli vuodesta 1905 naimisissa Harvardin yliopiston professori John A. Macyn kanssa. Pari muutti erilleen vuonna 1914, mutta ei koskaan ottanut virallisesti avioeroa. Sullivan kuoli New Yorkissa 70-vuotiaana yli kolmekymmentä vuotta Kelleriä aiemmin.[2]