Jusqu'en 1416, le manoir du Haut Coudray était la propriété de la famille Coudrais. Puis, il passe par succession à la famille Harpin, seigneurs de la Chesnaye entre 1532 et 1579. Le manoir appartient ensuite à la famille de Malenoë, seigneurs de la Chesnaye en 1623, qui le vend aux Gaucher, seigneurs du Verger en 1652, qui le vendent à leur tour aux Cochard, sieurs des Châteaux en 1705. Il passe ensuite par succession aux Fournier en 1754 puis aux le Cordier en 1774. En 1572, il avait été uni à la châtellenie de la Chesnaye puis en est distrait en 1652. Le manoir possédait un colombier, bâtiment qui correspond à l'un des privilèges seigneuriaux. Toutefois, il a disparu de longue date puisqu'il n'existait déjà plus en 1834, lors de la réalisation du premier cadastre communal. Le moulin est un autre bâtiment souvent associé aux manoirs, le cadastre de 1834 nous montre qu'il existait à cette époque, au nord-ouest, un moulin du Coudray. Le bâtiment actuel a été très transformé depuis sa construction, cette transformation de l'ancien manoir en ferme est semble-t-il ancienne car sur le cadastre de 1834, la disposition des bâtiments semble peu ou prou correspondre à l'organisation actuelle. Les éléments anciens qui subsistent en façade sont la fenêtre à appui saillant de l'étage en partie ouest ainsi que la porte en arc brisé surmontée d'un larmier et la fenêtre à encadrement chanfreiné au rez-de-chaussée de la partie est. Ces éléments correspondent à une architecture du 16e siècle. De plus, le linteau de la fenêtre à appui saillant est décoré d'un écu lisse qui portait probablement les armoiries des propriétaires du manoir. Les deux autres fenêtres de cette façade ont été remaniées bien qu'elles présentent elles aussi des encadrements en granite chanfreinés, ce qui témoigne d'une volonté de respecter le style de la construction. De plus, la porte et la fenêtre situées sur la partie la moins élevée à l'est pourraient constituer des remplois. Leur insertion sur cette façade semble en effet étrange ; ou bien, il s'agit de cette partie du bâtiment qui a été transformé et qui a perdu un ou plusieurs niveaux. En 1834, sur le cadastre, il existait un fournil dans l'alignement ouest du logis et un autre bâtiment de dépendance au sud-ouest de la cour. Entre ce bâtiment de dépendance et le fournil, il subsiste les traces d'un ancien portail qui atteste du fait que l'accès à la cour de ce manoir se faisait autrefois de ce côté.