Según la tradición, en el castillo, Bertrada de Laon, tuvo a su hijo Carlomagno en 747.
La existencia del castillo en el siglo XIII como fortaleza, la gefürsteten Reichsabtei Prüm, está documentada (véase el Mittelrheinische Urkundenbuch).
Desde 1794 hasta 1802, el monasterio de Prüm fue ocupado y destrozado durante la Revolución francesa.
En 2009, los nuevos propietarios han recibido subvenciones del gobierno federal y de Renania-Palatinado para asegurar y restaurar los fuertes de cinco metros en el lado sudoeste, que datan del siglo XVI.
Las murallas, que se remontan al siglo XIII, también han sido saneadas con fondos del gobierno de Renania-Palatinado.