Butler on yksi Irlannin vanhimmista ja jaloimmista aatelissuvuista, ja se polveutuu Englannista. Sen esi-isä oli Theobald, k. 1206, Lancashirelainen aatelismies, joka oli Englannin justitiariuksen, Canterburyn arkkipiispan Hubert Walterin vanhempi veli. Tämä Theobald seurasi Juhana Maatonta Irlantiin vuonna 1185 ja sai noin 1192 "Irlannin juomanlaskijan" arvon (lat. pincerna, engl. butler). Hän itse kirjoitti sukunimenään Walter sekä Le Botiller eli Butler uuden arvon mukaan, mutta hänen jälkeläisensä ovat kaikki ottaneet Butlerin sukunimekseen. Suku lähentyi Englannin kuninkaallisen perheen kanssa, ja James Butler sai 1300-luvulla Ormonden jaarlin arvon. Toinen James Butler, 5. jaarli, oli yksi Lancasterin puolueen johtavista miehistä Ruusujen sodan aikana ja hänet teloitettiin vuonna 1461 Towtonin tappion jälkeen. Kuuluisa Kilkennyn linna oli suvun esi-isien koti.^[1]