Durante la Edad Media, el comercio marítimo se vio castigado por los piratas y corsarios, que llegaron a atacar Portopí a pesar de las cinco torres que lo defendían.[2] La orden de construcción fue dada por Felipe III en 1608, la obra comenzó en 1610 y se terminó en 1612.Durante la Guerra de Sucesión, se añadieron algunas construcciones defensivas en el exterior, frente al mar.En 1981 se comenzó su rehabilitación para convertirlo en un museo que albergara los fondos procedentes del recién cerrado Parque de Artillería.El museo contiene material sobre todo del siglo XIX y XX, así como una sección dedicada al general mallorquín Valeriano Weyler.
Cañones de artillería expuestos en las murallas del museo
