En 1751, à l'initiative de l'abbé Wilibrord Scheffer, on construit un bâtiment baroque de trois étages dont l'entrée principale donne sur la rue Notre-Dame avec l'inscription Refugium Abbatiae S. Maximini.
Aux ailes est et ouest se trouvent deux armoiries, les armoiries de l'abbé Maximinus von Gülich, venant du bâtiment précédent fait en 1663.
Le chroniqueur luxembourgeois Friedrich Wilhelm Engelhardt indique la présence permanente de deux moines et qu'il est la résidence des Habsbourg, les propriétaires, lorsque ses membres viennent dans la ville.