Kloosterorde De Cellebroeders was één van de vele ordes die zich na de godsdienstproblemen in de 16de eeuw vestigden in de stad. Zij verzorgden er de zieken, krankzinnigen en pestlijders. Dat verklaart ook waarom er geen ramen naar de buitenwereld zijn.