De ridderzetel "Enssebroog" bestond reeds in de 15e eeuw. Oude stukken vermelden dat in 1166 de vrije adelvrouwe Sigeidis haar erfleen Grathem aan de monniken van St Servaas te Maastricht schonk. In de l6e eeuw ressorteerde het onder "cour censale" van het kapittel van St.Servaas te Panheel. Van dit versterkt kasteel is thans niets meer over dan de fundamenten en aanwijzingen van omringende grachten in het landschap. Het was vroeger een strategisch punt. In een charter van 1470 staat Jan van ENSENBROECK als eigenaar vermeld. Omstreeks 1500 behoorde het aan de familie POLLAERT, aan wie door de Spaanse Kroon tevens het erfelijk recht was verleend om het blanke zwaard voor de vorst uit te dragen met de titel van "Porta Spada". Omstreeks 1600 waren Thierry Roost van ENSENBROECK en zijn zuster eigenaren van het kasteel. De laatste eigenaren waren de gebroeders Rost d'Ivora van Ensenbroeck, de laatste roofridders van ons land genoemd, die geparenteerd waren aan de familie van Randeraed en door deze aan de familie van POLLART de RANDERAET, de z.g. Weertse en Buggenumse tak.