A lo largo del tiempo se ha llamado de diversas maneras.
A veces, el nombre de "Torre dels Coloms" puede resultar extraño hoy entre los vecinos de Mogente, donde se la llama "torre mora" o simplemente "La torre".
Según cuentan, en su día fue utilizado por los colombicultores, de donde ha cogido el nombre.
Esta torre sería una de las que los expertos llaman torre albarrana o exterior, torres que se situaban fuera del recinto del castillo, generalmente unidas por una muralla, o más raramente, como en este caso, aisladas.
En este caso defendía tanto el castillo, como el camino de acceso, y probablemente el azud.