Vom 17. bis zum 26. Januar 1766 hielt sich hier der aus Spanien stammende Kapuziner-Ordensgeneral Paul von Colindres als Gast auf.[1] Bei einem Besuch machte die Atmosphäre des Konventes auf den Schriftsteller E. T. A. Hoffmann eine so nachhaltige Wirkung, dass dieser das Bamberger Kloster zu einem zentralen Ort der Handlung seines 1815 erschienenen Romans Die Elixiere des Teufels wählte.
Es wurde im 19. Jahrhundert abgerissen und an seiner Stelle eine Landwirtschafts- und Gewerbeschule, 1877 eine Realschule errichtet. Seit 1965 befindet sich dort das heutige Clavius-Gymnasium.