Het Brouwershuis werd in de 16e eeuw gebouwd door de bekende architect Gilbert van Schoonbeke, die onder andere de 'Nieuwstad' aanlegde - vandaag de buurt het Eilandje. Het is eigenlijk nooit een brouwerij geweest. In het gebouw werd water opgepompt dat de omliggende brouwerijen gebruikten.

Het museum in het Brouwershuis is voorlopig gesloten voor vernieuwing.