La paroisse est attestée dès le 11e siècle. La partie la plus ancienne du chef-lieu de la commune, de faible étendue et composée de quelques fermes, se situait, comme le montre le cadastre de 1824, au nord de l´ancienne route royale (puis départementale) liant Quimperlé à Concarneau. L´urbanisation demeure modeste et linéaire et se développe, entre 1840 et 1910, au nord de cette voie de communication. Elle est ponctuée par la construction (ou reconstruction) de plusieurs édifices : le presbytère, désigné en 1777 comme "manoir presbytéral", rebâti en 1847 d´après les plans de l´architecte Joseph Bigot, puis transformé en mairie en 1974, l´église paroissiale (1842-1853), également reconstruite d´après un projet de Bigot et une mairie-école (vers 1890), aujourd´hui école maternelle et primaire. Depuis le dernier quart du 20e siècle, le bourg de Baye, proche de Quimperlé, tout en perpétuant sa structure de village-rue héritée de la seconde moitié du 19e siècle, s´est étoffé par l´implantation de plusieurs lotissements, la cité de Kernével à l´est, Talbotéc au nord-ouest et Romerio au sud est.