Fue construido entre 1906 y 1909 por orden del político Agustín Ross Edwards.
[cita requerida] La construcción funcionó como oficina postal, tienda de bienes importados, hotel, discoteca y bar.
[1] Hubo dos intentos del gobierno local para comprar el edificio; el primero en 1982, el cual no prosperó, y el segundo en 1995, que fue exitoso.
El recinto fue declarado Monumento Nacional junto con el Parque Ross en febrero de 1988.
El centro cultural fue inaugurado en 2010 por la entonces presidenta Michelle Bachelet y el alcalde de Pichilemu Roberto Córdova.