San Hilarión fue originalmente un monasterio; su nombre era el de un monje que al parecer eligió el sitio para hacerse ermitaño.
En el siglo XIII pasó a manos de la familia feudal Ibelín.
El emperador no pudo tomarlo y fue vencido en la batalla de Agridi.
La sala inferior tenía los establos y las viviendas para los hombres de armas.
La torre del príncipe Juan se encuentra en un acantilado sobre el castillo inferior.