Commune créée en 1803, Saint-Ganton ne connaît pas alors de village proprement dit. Le centre-bourg actuel est composé de deux écarts : le Bourg et la Roche. Le Bourg est constitué uniquement de l'église paroissiale, de la mairie et d'une ferme (l'une des plus importantes de la commune). Il s'est développé sur le fonds de l'ancien prieuré de Saint-Guenganton (ou Saint-Gwengweton) fondé par les Bénédictins de l'abbaye de Saint-Méen avant le 10e siècle et celui du manoir de Saint-Ganton, vraisemblablement construit au 15e siècle. La Roche est le hameau le plus important de la petite commune avec ceux de Gominé et de Beaucel. Il s'est développé au pied des carrières de schiste dont beaucoup de maisons de Saint-Ganton furent construites.