En 1321 los Despenser se habían ganado muchos enemigos en todos los estratos de la sociedad, partiendo por la Reina Isabel hasta los Barones y el pueblo llano.

Sin embargo ambos volvieron al año siguiente y rápidamente derrotaron a sus oponentes los que fueron ejecutados, encarcelados o exiliados.

Llegaron al siguiente acuerdo: Inglaterra tomaría posesión de la Gascuña pero debía hacerle un homenaje a Francia.

Fue durante este período que Roger conoció a la Reina Isabel y se hicieron amantes, la relación entre la Reina y el prófugo, al amparo del rey francés, era escandalosa ante los ojos de todo el mundo.

Ante la negativa del soberano, prepararon un ejército de invasión y ese mismo año, Roger e Isabel, invadieron Inglaterra con el apoyo de los nobles descontentos, resultando victoriosos.

Durante la minoría de edad del nuevo soberano la regencia la ejercerían Roger Mortimer y la Reina Isabel.

Durante ese año, el abdicado Eduardo II logró escapar con la ayuda de sus partidarios, pero fue rápidamente capturado y murió en el Castillo de Berkeley donde fue encarcelado.

Roger e Isabel intentaron resolver el problema con Escocia de forma diplomática, debido a la devastación de los condados ingleses y el vacío en las arcas que había dejado el anterior gobierno sumado al pago de la indemnización a Francia, no se podía costear un ataque armado.

Ambos en un principio habían apoyado el derrocamiento de Eduardo II y los Despenser.