A côté de Vielmanay, le château est au départ une maison forte qui assure la protection de l'abbaye de Bellary au XIIIe siècle. La guerre de cent ans ruine cette maison forte qui est reconstruite à l'époque renaissance par Guillaume de Marafin. De l’ancienne maison forte médiévale, il reste encore aujourd'hui la tour massive Nord Est, la base de la tour Sud Est, ainsi qu'une partie de la Tour carrée d’entrée et des douves. La tour Nord Est, massive, est couronnée de mâchicoulis et d’un chemin de ronde, ses murs sont percés de deux canonnières d’origine où des archères ont été créées plus tard.
La cour intérieure permet d’accéder à un grand corps de logis, à un étage, construit sur les caves voûtées d’origine et entre les deux tours rondes par Guillaume de Marafin en 1480. La façade possède des baies moulurées, elle est flanquée en son milieu d’une tour hexagonale, coiffée d’un toiture polygonale et abritant un escalier à vis. Au XVIIème siècle, de larges fenêtres ont été ouvertes dans les deux façades et deux pavillons rectangulaires ont été bâtis de part et d’autre du porche ainsi que sur les bases des premières constructions de l’enceinte du XIIIe siècle. Aujourd'hui, le site est privé et peut se visiter uniquement l'été lors des visites proposées par les propriétaires ou l'Office de Tourisme.