La casa sufre dos reformas, la primera en el siglo XVI y la última en 1758 por el padre de Jovellanos.

Esta última es la que le da su aspecto actual.

En la actualidad presenta dos torres a los lados con un edificio que las une; tiene anexa una capilla (Los Remedios, en dónde está enterrado) y por delante está la plaza que se denomina «Plaza de Jovellanos».

Abierto el 6 de agosto de 1971, el museo guarda la colección artística municipal que fue trasladada desde su antigua ubicación en el antiguo Instituto Jovellanos.

Cabe destacar el desarrollado con el artista Paco Cao bajo el título Usted misma.