El padre legal de Joe Carstairs era el capitán del ejército escocés Albert Carstairs, primero perteneciente a los Royal Irish Rifles[2]​[3]​ y luego al Princess of Wales's Own.

[5]​ Al menos un biógrafo ha sugerido que el Capitán pudo no haber sido el padre biológico de Joe.

Se divorció del capitán Francis para casarse con el conde francés Roger de Périgny en 1915, pero finalmente lo abandonó debido a su infidelidad.

El propósito del matrimonio era simplemente permitir que Carstairs accediera a su fondo fiduciario independientemente de su madre.

Tuvo numerosas relaciones con mujeres, incluyendo a Dolly Wilde, sobrina de Oscar Wilde, una compañera conductora de ambulancia, con quien había vivido en París; y varias actrices, Greta Garbo, Tallulah Bankhead y Marlene Dietrich, entre otras.

Durante la Primera Guerra Mundial, Carstairs sirvió en Francia con la Cruz Roja estadounidense, manejando ambulancias.

Carstairs (y sus amigas y amantes) vivían en un piso situado encima del garaje,[11]​ que estaba ubicado cerca de Cromwell Gardens, en el moderno distrito londinense de South Kensington.

Conquistó el trofeo del duque de York y se estableció como la mujer más rápida en el agua.

Después de vender Cayo Ballena en 1975, Carstairs se mudó a Miami.