Het kasteel zou dateren van 1186. Het was eigendom van de eerste heren van Molenbaix en vanaf 1359 van de Lannoy’s en vervolgens vanaf de 16e eeuw van de familie de Croÿ.
Op het einde van de 18e eeuw zijn de Scorrions de trotse eigenaar ervan.
In 1833 werd het gekocht door de heer Alfred de la Croix de Maubray. Pauline, een van zijn dochters, gehuwd met Baron Joseph Gillès de Pélichy, volgde hem op.
Vervolgens werd het kasteel bewoond door hun dochter Marie, vrijgezel, en daarna door haar broer Baron Alfred Gillès de Pélichy.
Ten slotte ging het via een erfenis naar de familie Gericke d’Herwynen, en momenteel wonen Myriam en Philippe de Ghellinck d’Elseghem Vaernewijck er.