Sin embargo, a la muerte del vizconde de Thouars, Mouzeuil fue retomado por su sucesor Geoffrey.

Cuando el vizcondado de Châtellerault quedó vacante, Hugo lo solicitó al duque, pero éste se limitó a hacerle promesas vacías.

Hugo se enfrentó entonces al duque hasta que éste le concedió el feudo de Vivonne.

El duque obtuvo dos diplomas de Roberto II que confirmaban este establecimiento monástico y otro en Couhé.

Según el Conventum, Hugo murió un año después de su acuerdo final con el duque, probablemente en torno a 1026.