[7] Se sabe también que hacia mediados del siglo XVII perteneció al Marqués de Aytona y, más tarde, al Barón de Espés, para pasar luego a ser un señorío secular.[12] Durante el siglo XX, la población de Nuez de Ebro ha oscilado en torno a los 500 habitantes; ha sido en el siglo XXI cuando la población empezó a aumentar.Junto a la plaza donde se encuentran dos olmos centenarios se encuentra el conjunto monumental formado por la iglesia de San Martín y la casa palacio donde está el ayuntamiento.En el exterior, el edificio es sumamente interesante, ya que su fachada de tres alturas está concebida con carácter civil, complementando a la del palacio.[18] La casa palacio presenta una disposición en ángulo recto que se prolonga con la situación del templo.