Identifié à tort comme un camp romain, les vestiges d'une ancienne motte féodale nommés Goh Castel, fouillés en 1907, puis en 2013, ont révélé la trace d'une enceinte pentagonale à double talus et de constructions remontant au Haut Moyen-Age (du 7e siècle au milieu du 12e siècle). Situés au nord-ouest de Coët Codu, ils correspondraient à l'emplacement de l'ancienne seigneurie de Breman, plus tard de devenue Coët Codu et déplacée sur le site actuel.

La seigneurie de Breman est attestée dès 1414, appartenant à Jean de Coethuhan, puis à Guillaume de Penhoet en 1448, qui la donne à sa soeur Beatrix, épouse de Guillaume du Fresnay. La famille du Fresnay conserve la terre de Coet Codu jusqu'en 1658, où elle passe par mariage aux Perenno, seigneurs de Kerduel (Lignol), puis par mariage à Pierre Le Vicomte seigneur du Rumain. Le mariage de son fils Charles-Yves avec Julienne de Kerhoent ajouta à leurs possessions la terre de Coat-en-Fao.

Le bâtiment actuel a été reconstruit sans doute dans la 2e moitié du 18e siècle, au plus tard au tout début du 19e siècle. Une lucarne sur l’élévation est et les deux anciennes lucarnes de l'élévation sud sans doute passantes comme celle qui subsiste au nord, ont disparu au profit, au sud, de trois nouvelles en granite datant du milieu du 19e siècle. L'appentis latéral nord-ouest a été surélevé au 20e siècle.

Les dépendances qui longent la route au sud, de plan en U et terminées par un four sur la plan de 1842, ne comporte aujourd'hui que deux bâtiments parallèles, celui établi le long de la route pouvant être un ancien logis du 18e siècle.