Se refugió en Cumbria o Escocia, pasando desde allí a Irlanda, donde había todavía apoyo considerable para su causa en Tipperary y Kilkenny.

Ambos chocaron en la Batalla de Piltown en 1462, que concluyó en con una decisiva victoria yorkista.

Fue restaurado al condado por Eduardo IV tras haber sido desposeído por su participación en Towton.

Se dice que Eduardo IV afirmó que "si la buena crianza y las cualidades liberales se perdieran en el mundo, podrían ser todas encontradas en el Conde de Ormond".

Dominaba las lenguas europeas y fue enviado como embajador a las principales cortes.