El castillo fue construido en 1866 por el arquitecto inglés Edward Milner por encargo de la familia Liedekerke-Beaufort, quienes debieron abandonar su residencia anterior, el Castillo de Vêves, durante la Revolución Francesa.
Sus descendientes lo ocuparon hasta la Segunda Guerra Mundial, cuando fue adquirido por la Sociedad Nacional de los Ferrocarriles Belgas (SNCB/NMBS) para convertirlo en orfanato.
Abandonado desde 1991, el castillo se encontraba a principios del siglo XXI en un estado lamentable de conservación y amenazaba con derrumbarse en cualquier momento.
Por esa razón, en octubre de 2016 las autoridades optaron por empezar a demolerlo.
En el castillo se han rodado escenas de la serie de televisión estadounidense Haníbal, si bien en ella aparece como castillo Lecter y figura que está en Lituania.