El palacio Sorgenfri está rodeado por un gran parque que limita con Mølleåen al este.
En 1686, fue sustituido por una casa de campo por el juez del Tribunal Supremo Michael Vibe.
Por tanto, el paso entre las dos alas laterales residenciales sólo era posible en la planta baja.
[5] Frederik VII había cedido Sorgenfri al Estado en 1856 y después de 1881 quedó vacío durante años.
El edificio principal volvió a quedar vacío con la muerte de la princesa Carolina Matilde en 1995.
Desde 1991, el conde Christian de Rosenborg, primo hermano de Margarita II, y la condesa Anne Dorte vivieron en un ala separada del palacio llamada Damebygningen hasta que fallecieron en 2013 y 2014, respectivamente.
El palacio se encuentra en un jardín de 40 hectáreas, realizado originalmente en estilo barroco en 1706.
El príncipe Federico lo hizo cambiar a un estilo de jardín paisajístico inglés entre 1791 y 1794.
El parque cubre un área grande a ambos lados de Lyngby Kongevej.
En el siglo XVIII se creó un jardín de estilo francés con simetría, arbustos topiarios y jarrones ornamentales.