El topónimo Morón podría hacer referencia a roca, monte o montículo, en este caso ajustado a la fisonomía del pronunciado cerro del castillo.

[3]​ Pascual Madoz no hace referencia al castillo, aunque señala una ermita, Nuestra Señora de los Santos, que se dice haber sido convento de Templarios, y en ella se conserva una gran bandera con varios geroglíficos, que la opinión refiere haberse tomado a los moros.

Se sabe de su existencia en época celta por los restos arqueológicos encontrados en él.

En el segundo cuerpo aparece una ventana con friso de estilo salmantino.

[12]​ En el cuerpo superior se encuentran los vanos para las ventanas, separadas por columnas.

[12]​ En la portada destaca la verja forjada, mientras que en su techo aparecen los cuatro evangelistas y el escudo de los Mendoza.

[11]​ El palacio tiene fachada de sillería, con una portada ceñida por columnas.

Encima del edificio se encuentra el reloj en su espadaña, de 1881.