La primera mención documental señala que la propiedad albergó a los cardenales Giovanni y Giacomo Colonna en los años 1200.Al morir, el palacio fue saqueado durante los disturbios, y la propiedad principal pasó a manos de la familia Della Rovere.Con Filippo Colonna (1578-1639) comenzaron a producirse reformas y se creó un complejo unitario alrededor de un jardín central.Hay salas con frescos completadas después de 1664 por Crescenzio Onofri, Claudio Lorena y Pieter Mulier (al que se llamaba Cavalier Tempesta).En la galería principal se rodaron, en 1953, las imágenes finales del célebre filme Vacaciones en Roma, protagonizado por Audrey Hepburn y Gregory Peck.
