El palacio se construyó entre los años 1568 - 1569, según el proyecto del arquitecto Bernardino Contin, por encargo de Daniele Barbarigo, miembro de la familia noble veneciana Barbarigo, la cual ya poseía un edificio anterior en el lugar donde se erigió este palacio.
[1] El pasadizo aún existe, aunque cegado en ambos extremos, ya que se trata de propiedades diferentes.
[2] Actualmente, el palacio está dividido, albergando en las plantas inferiores al Centro Alemán de Estudios Venecianos y un hotel; reservándose las plantas superiores para uso de la familia Loredan, actuales propietarios.
Esta característica del edificio se pone de manifiesto en su propio nombre.
La terraza se extiende 24 m a lo largo del rio di San Polo y 14 m a lo largo del Gran Canal y, hasta hace pocas décadas albergó un jardín colgante.