[1]​ El castillo fue construido entre 1659 y 1686 en el cerro Pan de Azúcar, desde donde domina la ciudad y a su vez puede observar el golfo de Cariaco y la península de Araya.

Con paredes de dos metros de espesor y una potente artillería, siguió en servicio bien entrado el siglo XIX.

También se encuentra conectado a la ciudad mediante túneles y pasadizos.

[2]​ Al igual que muchos castillos venezolanos sirvió de prisión, albergando entre sus paredes figuras políticas como José Antonio Páez y José Tadeo Monagas.

[3]​ En 1929 un terremoto dañó seriamente al castillo, pero ha sido restaurado desde entonces, y en 1965 fue declarado Monumento Histórico Nacional.