Jacobo estuvo cautivo en Inglaterra 18 años, durante los cuales Albany gobernó Escocia como regente, prácticamente como rey.
No obstante, en 1349 se emitió una dispensa papal que legitimó el matrimonio y los hijos.
En 1362, la pareja tuvo un hijo varón, Murdoch Estuardo, que en su momento heredó los títulos y propiedades de sus padres.
También llevaron a cabo varias expediciones militares contra el Reino de Inglaterra.
John Debrett, en 1805, escribió:[7] Tras la muerte de su hermano, el rey Roberto III, Albany gobernó Escocia como regente.
Como era previsible, Albany no hizo ningún esfuerzo por pagar el rescate del príncipe para traerlo de vuelta a Escocia, concentrando sus energías en afianzar su propio poder y sus intereses.
En primer lugar en 1361, con Margaret Graham (1334–1380), condesa de Menteith, una acaudalada divorciada que ya había tenido tres maridos.
Nunca pudo heredar los títulos de su padre, ya que habían sido confiscados.
Un bisnieto de Albany, Jacobo Estuardo (c. 1410-1470), consiguió el indulto del rey y su permiso para regresar a Escocia, aunque la familia nunca recuperó sus propiedades.