El título hace referencia a la localidad de Ampudia en Palencia.Éste consiguió de Juan II privilegio para instituir mayorazgo con la villa.Su hijo, Pedro García López de Ayala colocará los escudos de Herrera, Ayala y Rojas en el pórtico del castillo.Después de la abolición de los mayorazgos en el siglo XIX y estando el título en manos del duque de Osuna cayó en pleitos dinásticos.En la separación de la casa, el título recayó en la casa del Infantado, mientras que el ducado de Lerma recayó en la casa de Medinaceli.