Paul Banéat mentionne ce bâtiment comme l'ancien manoir de Ruzé. Au début du 20e siècle, en façade, il existait un cadran solaire en schiste ardoisier qui portait l'inscription suivante : M : IEAN_DU ROCHER_S : DV ; D : LIE_1696. Le centre de ce cadran solaire était gravé d'un soleil de part et d'autre duquel se trouvaient les monogrammes du Christ et de la Vierge : IHS et MAR. Les angles de ce cadran étaient ornés de têtes d'anges. A l'instar des autres bâtiments de ce type, ce manoir possédait une chapelle à l'origine ; elle avait déjà disparu au début du 20e siècle. En 1655, le manoir de Ruzé appartenait à Gillette Even, veuve d'Alain Bergeault, sieur d'Ollivet. En 1688, les Brunet, sieurs de Quénillac, y habitaient et la famille Rocher en était propriétaire à la fin du 17e et au 18e siècle, ainsi qu'en témoigne l'inscription portée sur l'ancien cadran solaire. Bien que le cadran solaire portait la date de 1696, la construction du bâtiment peut être un peu antérieure à cette date. Ainsi, la porte en plein cintre à encadrement en pierre calcaire chanfreiné, la grille de la fenêtre, la poutraison de forte section ou bien encore la présence d'un escalier en vis sont des éléments caractéristiques de l'architecture du début du 17e siècle. Le manoir était composé de deux pièces principales, l'une au rez-de-chaussée, la salle et la seconde, une chambre, à l'étage, au-dessus de la première. Toutefois, la tradition orale nous a rapporté qu'il existait des latrines sur le pignon est, à l'étage, ce qui laisse supposer que cette partie de l'étage était peut-être occupée par une autre chambre à l'origine.