Selon Guillotin de Corson, l'hôtel des Gentilshommes est une maison d'éducation pour les enfants des gentilshommes pauvres de Bretagne fondée en 1746 et autorisée par lettre patente du roi en 1748. A l'origine, l'établissement accueille 30 enfants de 7 à 12 ans. Il sera transformé en prison en 1793, puis en caserne avant sa démolition. L'édifice est connu par une gravure réalisée d'après l'élévation de l'architecte Forestier le jeune, conservée aux archives départementales. Elle présente une élévation à 17 travées rythmée par des avant-corps couronnés de frontons semi-circulaire (pavillons latéraux) et triangulaire (avant-corps central). L'édifice est construit en rez-de-chaussée surélevé sur cave, il compte un étage carré et deux étages de comble. L'accès centré est précédé d'un escalier à deux volées de plan circulaire, également visible sur le cadastre de 1842 qui figure le corps de logis, de plan rectangulaire, implanté entre cour et jardin.