Se destaca por haber sido la casa donde nació y vivió en el siglo XVI el Inca Garcilaso de la Vega.

En la primera mitad del siglo XX se planeaba ya su remodelación.

[7]​ En la década de 1960 se aprobó la restauración definitiva a cargo del arquitecto Víctor Pimentel Gurmendi.

[8]​ En 1967, el inmueble fue expropiado por el gobierno peruano para ser utilizado como sede del Museo Histórico Regional[9]​ que, hasta ese año, se ubicaba en la Casa de los cuatro bustos.

Dicha edificación tuvo importancia religiosa, ubicada en el octavo ceque hacia el Chinchaysuyo instaurada por el Inca Huayna Capac.