Durante la Guerra de los Treinta Años, el castillo fue saqueado por el ejército sueco (1643).

No fue hasta el año 1664 cuando un obispo de la poderoso familia Liechtenstein encargó al arquitecto Filiberto Lucchese la renovación del palacio en un estilo barroco.

Después de que el castillo fuera devorado por un gran fuego en marzo de 1752, dos artistas imperiales destacados, Franz Anton Maulbertsch y Josef Stern, llegaron a la residencia para decorar los salones del palacio con su obra.

La parte principal de la colección fue adquirida por el obispo Karel en Colonia en 1673.

El palacio también contiene un sobresaliente archivo musical y una biblioteca de 33.000 volúmenes.