[3] El señorío lo poseyó después Leonor Carrillo y posteriormente pasó a su nieto Pedro Carrillo de Toledo, casado con Elvira Palomeque, y después a la hija de ambos, Mencía Carrillo Palomeque, la esposa del Fernando Álvarez de Toledo y Sarmiento, el primer conde de Alba de Tormes.[4][5] En agosto de 1466, ya viuda, Mencía vendió el castillo y todas sus propiedades en Mazuelo a Sancho de Rojas Manrique,[4][a] VI señor de Monzón y Cabia.[6] Su hijo segundo de su primer matrimonio, Martín de Rojas Pereira, heredó el castillo y otros bienes en Mazuelo de Muñó,[6] pero al no tener hijos varones, solamente hijas que fueron monjas, todas sus heredades revirtieron al mayorazgo[5] del primogénito, Diego de Rojas Pereira.En su testamento otorgado en 1546, nombró heredero del mayorazgo a su sobrino Pedro Ortega Cerezo de Torquemada.[7] La torre fue habitada hasta la primavera de 1923 cuando un incendio destruyó su interior.