Su otra hija, esposa de Antoine Passy, pasa a ser la dueña del lugar.

Durante la segunda mitad del siglo XIX se realizaron nuevos acondicionamientos interiores.

El ala de la rue des Tournelles, todavía llamada fachada este, está intacta.

Las ramas principales de esta casa principesca son : Rohan-Chabot, Rohan-Guémené, Rohan-Montbazon, Rohan-Soubise, Rohan-Gié.

Había planeado con Gilles du Hamel secuestrar al Delfín y si era posible al Rey, levantar Normandía, entregar el puerto de Quillebeuf a los españoles, convocar a los Estados Generales y reformar el Estado.

Madame de Sévigné se alojó en el ala este, 17 rue des Tournelles.

La famosa cortesana Marion Delorme también habría vivido allí (en el ala de la Place des Vosges), desde 1639 hasta 1648.

Allí escribió en particular Ruy Blas, Lucrèce Borgia, los Burgraves, Les Chants du Twilight .

Lucienne Heuvelmans, escultora, instaló su estudio en el ala de 17 rue des Tournelles, en la planta baja y entresuelo sur.

El ala Tournelles sirvió como escenario para la película Le Magnifique con Jean-Paul Belmondo y Jacqueline Bisset.