La ferme de Kerviliou est composée d’une maison datable de la seconde moitié du 16e siècle, et de dépendances agricoles largement remaniées aux 19e et 20e siècles, formant une cour ouverte au sud.

Le logis présente des caractéristiques des petits manoirs, bien qu’aucunes données n’aient été trouvées attestant de la présence d’un logis noble à Kerviliou. La porte centrale à clé datée 1666 est entourée de deux fenêtres partiellement rebouchées et ayant perdues leurs barreaux. La petite fenêtre du premier étage présente une accolade. L’agencement intérieur est constitué d’une salle en rez-de-chaussée à cheminée à linteau en bois et d’un étage accessible par un escalier à vis en pierre en demi-hors œuvre en façade arrière.

L’édifice, qui a subi un incendie durant la première moitié du 20e siècle, présente aujourd’hui une toiture surbaissée et a perdu son comble. L’escalier extérieur a également été abaissé d’un niveau. Il donnait anciennement accès au comble et à une petite pièce en haut de la « tour ».