Por tanto, de una u otra forma, Lady Stafford tenía ciertos derechos al trono.
La residencia de los Pole en ese momento era el Castillo Warblington, en Hampshire.
Su hermano mayor Henry, uno de los nobles presentes en el juicio contra Ana Bolena, fue ejecutado por traición en 1539; dos años más tarde su madre fue ejecutada por el mismo delito, y todos los títulos y honores de su familia fueron requisados por la Corona.
Ella tenía quince años, mientras él aún no llegaba a los dieciocho.
Al año siguiente, en 1521, su suegro fue decapitado por traición, y sus títulos pasaron a la corona.