Su abuela, Kathleen Scott, fue alumna de Auguste Rodin, y viuda del famoso explorador Robert Falcon Scott, que posteriormente se casaría con al abuelo paterno de Emily, el político y escritor Edward Hilton Young, primer Baron Kennet.
Su padre, Wayland Hilton Young, segundo Baron Kennet, fue también político y escritor.
Primero interesada en la pintura, pasó su juventud en Londres, Wiltshire e Italia antes de ingresar en la Chelsea School of Art durante un año en 1968.
Fue durante estos años de viajes cuando desarrolló su amplia visión del arte.
Ella pudo haber sido la inspiración para la canción "See Emily Play", escrita por Syd Barrett de Pink Floyd.