Le lieu  qui accueille le Musée est une maison qui date du 15e siècle. Son existence apparaît dans le Compoix (cadastre) de 1578 qui indique le nom du propriétaire et son origine (1485). c'est le 26 place du Faubourg - 

Esplanade Bouyssière.

Elle est agrandie vers le Nord avant 1616 et est alors occupée par un berger qui élève des moutons dans la cave.

Vers 1810, le jardin qui se trouve alors au 28  - là où se trouvait le commerce d'Angèle Gauchy - est construit et devient un commerce de grains. C'est l'époque du renouveau de la foire qui avait disparu à la Révolution