Después cambió de propietarios, y fue destruido o modificado continuamente.Más tarde, en la dinastía Yuan se convirtió en el jardín del templo Dahong.[4] Wen produjo un segundo álbum de ocho hojas mostrando lugares del jardín en 1551, con diferentes vistas pero los mismos poemas que en 1533.[4] Añadió muchas modificaciones a lo largo de los siguientes cuatro años, acabando el trabajo en 1635.[4] En 1949 las tres partes del jardín fueron unidas por el gobierno chino y posteriormente abiertas al público, luego restauradas en 1952.Se supone que Cao Xueqin, autor del Sueño en el pabellón rojo, vivió en el jardín durante sus años de adolescente.El jardín contiene numerosos pabellones y puentes colocados en un laberinto de piscinas e islas conectados.[6] Según Lou Qingxi, comparado el estilo del periodo Zhenghe en la dinastía Ming, el jardín «ahora tiene más edificios e islotes», y aunque le falta un sentimiento "elevado", es "aún una obra maestra de trabajo meticuloso".La laguna va de norte a sur, y en la parte central se alza un islote.
