Fue fundado por los miembros del Grup d'Elx, los artistas Joan Castejón, Albert Agulló, Antoni Coll y Sixto Marco.

También contribuyeron a su fundación algunos críticos de arte, como Vicente Aguilera Cerní y Ernest Contreras.

Más tarde, una vez expulsados los moriscos en el siglo XVII, se construyó una universidad en 1655.

El museo se organiza en cuatro salas en las que se puede ver una colección variada, en el cual hay dos corrientes pictóricas vanguardistas de los años 1950 y 1980: el arte abstracto, y el arte figurativo o realista.

Algunos de los artistas que forman parte de la colección son Juana Francés, Manuel Rivera, Eusebio Sempere, Arcadio Blasco, José Hernández, Albert Ràfosl Casamada, Antoni Miró, y Salvador Victoria.