Richard le Despenser, cuarto barón Burghersh (1396-1414) era hijo y heredero de Thomas le Despenser, primer conde de Gloucester (1373-1400), de Constanza de York . Constanza era hija de Edmundo de Langley, duque de York , cuarto hijo superviviente de Eduardo III de Inglaterra , e Isabel de Castilla , hija de Pedro de Castilla . Estaba casado con su prima segunda, Lady Eleanor Neville (nieta de Juan de Gante , hermano de Edmundo de York), pero murió joven sin dejar descendencia. Su heredera fue su hermana menor Isabel , que se casó sucesivamente con el conde de Worcester , y luego con su primo, Richard de Beauchamp, decimotercer conde de Warwick .
Su viuda Eleanor, Lady Burghersh, se volvió a casar con Henry Percy, segundo conde de Northumberland .