El grabado que aparece en I Quattro libri dell'architettura de Palladio (II, p. 63) muestra las intenciones del arquitecto: dos barchesse o almacenes agrícolas doblados en forma de «U» que cierran un cuerpo central muy prominente.
El diseño original también pretendía tener zonas que sirvieran como bodegas, establos, palomares, y otros espacios útiles.
Tradicionalmente se hace remontar a finales de los años cuarenta del siglo XVI, con sólidos argumentos, como la imprevista herencia del hermano Marcantonio que Giacomo obtiene en el año 1554, o que dos años más tarde estos adquirieron importantes cargos públicos en Vicenza.
Parece que se empezó a construir por las barchesse porque preexistía una casa en el lugar, edificio habitado por Giacomo.
Con el tiempo, sí se construyó el edificio central, pero ocurrió en el siglo XVII según un plano de Baldassarre Longhena, no perteneciendo por lo tanto este cuerpo al estilo palladiano.