Por esta razón existieron numerosos castillos y fortalezas en el mismo.
Se tienen noticias de, al menos, cinco castillos o recintos fortificados, si bien se han conseguido identificar El Castillito, el Castillo de Coves y el Castillo de Corral Antón.
Se sabe que existían dos torres de defensa y vigía, pero aún no se han localizado sus restos.
Al negarse gran parte de esta población a abandonar la zona, se refugiaron la Muela de Cortés, donde resistieron a las tropas reales, aunque finalmente fueron derrotados.
El señorío estuvo detentado por la familia Bou hasta que se quebró la línea masculina directa de dicho apellido.