De probable origen medieval, la construcción actual data del siglo XV.
Su nombre se debe a don Borja Barreda, titular del mayorazgo en 1844.
Constituye un conjunto con otro volumen, separado de él por un patio del siglo XVI, y está adosada a otras construcciones.
La fachada posee dos escudos góticos con las armas de la familia Barreda, protegidos por dos piedras salientes.
En la actualidad es un centro cultural dependiente de las familias Polanco y Pérez Arauna que basa su programación en exposiciones de arte contemporáneo, encuentros con creadores y visitas guiadas al edificio.