Sous l’Ancien Régime, Berneau fait partie du comté de Dalhem, possession du duché de Brabant. Le village possédait sa cour de justice et abritait un drossard, officier et représentant personnel du duc de Brabant. Il était le principal officier de justice et de police. Seigneurie déjà attestée au IXe siècle, Berneau comptait au XIIIe siècle trois donjons défensifs dont le château appelé jadis le Borcht (château fort en thiois), bâti sur les fondements de la forteresse primitive du IXe siècle. À l’origine et jusqu’au XIVe siècle, le château était entouré de fossés et d’étangs. Le donjon fut transformé en châtelet en 1555. L’ancien château de Berneau fut la propriété de diverses familles parmi lesquelles les Gulpen qui, au XVIe siècle, détenaient cette fonction de drossard. L’édifice actuel a été construit sur des substructures du Haut Moyen Âge et remanié à partir de 1608. Au XVIIIe siècle, il passe aux Borchgrave d’Altena et prend son appellation actuelle. Démoli partiellement en 1914, il devient propriété de la commune qui procède à sa restauration. Reconstruit dans le style de l’époque, il ne présente plus de nos jours que de rares percements d’origine. Le donjon, en moellons calcaires, remanié, a conservé sa haute poterne, une porte dérobée. Il est flanqué d’une tourelle abritant la cage d’escalier. À l’ouest, une annexe carrée reconstruite dans l’Entre-deux-Guerres, abritait jadis une seconde entrée. À l’étage, bâti en briques et tuffeau, on trouve la date de 1608 replacée sous une dalle aux armes de Frambach de Gulpen et de son épouse Agnès van Eertweck. Au sud-est, on trouve une construction du XVIe siècle éclairée par des baies en accolade.
Classement comme monument le 25 janvier 1935