De su padre heredó vastas propiedades en Inglaterra y Normandía.

Cuando estalló la revuelta del joven Enrique en abril de 1173, Robert fue a su castillo en Breteuil en Normandía.

Los rebeldes planeaban hacerse con el control del ducado, pero el propio Enrique II puso sitio al castillo; Robert huyó, y Breteuil fue tomado el 25 o 26 de septiembre.

Poco después, Robert recibió de nuevo sus tierras y sus títulos, pero no así sus castillos.

Robert tuvo poca influencia en los años restantes del reinado de Enrique, pero recuperó el favor real con su hijo Ricardo I, portando una de las espadas estatales en su coronación en 1189.