En bas de la rue du Château, à l’entrée du pont de Saint-Goustan, on pouvait voir plusieurs bâtiments anciens  encadrant une cour intérieure tournée vers la rivière. La partie gauche des bâtiments qui s’avançait sur l’eau avait la façade recouverte d’ardoises de bois et était perchée sur des pilotis.

Entre 1962 et 1964, ces vieilles bâtisses jugées trop dangereuses ont été démolies. La commune d’Auray a aménagé un square dans cet espace vide, le long de la rivière.