La fundación de este castillo aparece envuelta en varias leyendas relacionadas, incluso, con Bernardo del Carpio (siglo IX).Fue construido sobre un antiguo castro, quizás en la primera mitad del siglo XII.Participó en las guerras fronterizas por la posesión del condado de Limia, entre el monarca Alfonso VII de Castilla y León y Afonso Henriques de Portugal.Más tarde, en el año 1467, fue arrasado por los irmandiños, siendo posteriormente reconstruido.Hoy solo queda parte de la torre del homenaje, en la que se pueden observar sus gruesos muros.