L’origine du bâtiment principal est certainement ancienne, mais aucun texte ne fait mention d’un seigneur des lieux
La propriété est mentionnée sous le nom de Dufraisse sur le cadastre de 1809 et comporte des bâtiments agricoles et des communs.
Le domaine est lié au moulin, plus en amont et au bâtiment situé au bord du gave afin d’utiliser la force hydraulique.
Le château est une propriété privée.
Le corps de logis comprend un bloc rectangulaire, des échauguettes et une tourelle octogonale, le tout étant coiffé de toitures en flèche.
Les encadrements des baies sont moulurés sur l’ensemble des façades, hormis pour celle qui donne sur le gave puisqu’une avancée est ajoutée au XIXe siècle peut-être par la famille Dupeyrou.