L'edifici escolar actual està situat prop de l'Església de Sant Jordi al barri de Fener, que és la seu del Patriarcat. També és conegut amb els sobrenoms del castell vermell i l'escola vermella.
Dissenyat per l'arquitecte otomà grec Dimadis, l'edifici fou construït entre 1881 i 1883 amb una combinació eclèctica d'estils diferents i amb un cost de 17.210 lliures d'or otomanes, una suma enorme per aquell període. La gran cúpula a la part superior de l'edifici es fa servir com a observatori per a classes d'astronomia i hi té a dins un antic i gran telescopi.