D´une construction du 16e siècle semble subsister l´emprise au sol, la cave et la partie inférieure de la tour carrée qui enfermait sans doute un escalier en vis (disparu). D´un remaniement important intervenu au 17e siècle, peut-être à l´instigation d´Etienne Frogerays, maire de Quimperlé, témoigne la cheminée de la pièce haute de la tour d´escalier. La transformation de 1741 (date portée sur la lucarne centrale), affecte surtout l´élévation ouest sur rue. Lambris, escalier et cheminées sont, en partie, refaits au 19e siècle, tout comme les baies, légèrement agrandies. L´aile en retour sur cour, abritant vraisemblablement d´anciens communs (cuisine, remise et logement), figure sur le cadastre de 1824 ; ella a été modifiée à plusieurs reprises et rehaussée d´un ou de deux niveaux vers 1900.