No se conoce exactamente cuándo fue construido ni durante cuánto tiempo esa familia residió en este lugar.
A finales del siglo XVI, el Conde Edzard II amplió el castillo con un foso en estilo Renacentista.
El ejército imperial a las órdenes del general Matthias Gallas se había acuartelado en el castillo.
Hasta 1764, el Castillo de Berum tenía cuatro alas y una pesada torre rectangular en la esquina noroeste.
Las partes que todavía permanecen son el frente del castillo, un alargado edificio de ladrillos adjunto a la muralla defensiva con una torre portal de ladrillo y el antiguo pasaje barroco del portal.