[1]​ Posteriormente sufrió varias remoderaciones, la última en 1512 para la cual la reina Juana I de Castilla mandó que se pagasen los gastos.

En 1963, el Ministerio de Cultura lo declara Monumento Histórico Artístico.

[2]​ El castillo ha albergado desde sus orígenes un miliario romano que fue reutilizado como quicialera de una puerta, probablemente proveniente de un puente romano actualmente desaparecido.

El Arco se refiere al límite de la provincia Bética y la Tarraconense, hallado en 2018 en el municipio de Mengíbar (provincia de Jaén),[4]​ mientras que el Océano se refiere a Cádiz, donde terminaba la célebre Vía Augusta.

El catedrático Ángel Ventura confirmó que la pieza conmemora la restauración de la Vía Augusta en tiempos del emperador Claudio (r. 41-54) y que los musulmanes lo reutilizaron para la construcción del castillo.