[1][2] Originalmente se encontraban en el Jardín Sajón las fortificaciones de Varsovia, la muralla de Segismundo III, y un palacio construido en 1666 para el poderoso aristócrata Jan Andrzej Morsztyn.
Destruido en el Alzamiento de Varsovia, fue reconstruido parcialmente tras la Segunda Guerra Mundial.
El parque empieza a partir de la fachada trasera del palacio, flanqueando una larga avenida con numerosas esculturas.
La avenida central conducía directamente al palacio, como era habitual en los parques franceses de la época.
El Palacio Brühl y el Palacio Azul, así como el pabellón conocido como Gran Salón, fueron construidos o reconstruidos en las obras iniciales del Complejo Sajón durante el reinado de Augusto II.