Familjen började bygga huset mellan 1685 och 1695 och den fick dagens utseende under en ombyggnad mellan åren 1806 och 1820. Under 1900-talet har familjen knappt använt huset och efter renoveringar efter andra världskriget är det mesta av byggnaden uthyrt. I den före detta vinkällaren ligger restaurangen Esterházykeller.