En 1900, Duff-Gordon se casó con la famosa diseñadora londinense "Madame Lucile" (nacida como Lucy Christiana Sutherland, en ese entonces Señora James Stuart Wallace).
Duff-Gordon es conocido por las circunstancias en las que sobrevivió al hundimiento del RMS Titanic, en 1912, junto a su esposa y la secretaria de ésta, Laura Mabel Francatelli.
La secretaria de Lucile, Laura Mabel Francatelli, llamada "Franks", acompañaba a la pareja.
Los tres personajes consiguieron subir al bote salvavidas n.º 1 con 12 personas aunque tenía capacidad para 40.
[2] Los Duff-Gordon en ese momento (y la secretaria de su esposa lo escribió también entonces, pero no se descubrió hasta 2007), declararon que no hubo mujeres y niños esperando a bordo en las cercanías del lanzamiento del bote y se ha confirmado que ese bote salvavidas estaba casi vacío y que el primer oficial, William McMaster Murdoch, estuvo aparentemente de acuerdo en ofrecerle a Duff-Gordon, su esposa y su secretaria un lugar (solo para llenarlo), después de que preguntaran si podían subir.