Acudió a la Midwood High School de Brooklyn y se graduó en 1949.
Elliott creció influido por los rodeos del Madison Square Garden, y en un principio quiso ser un vaquero.
Ambos viajaron a través de estados del Atlántico y por Nueva Inglaterra.
Para 1960, ya había grabado tres álbumes de folk para la compañía discográfica británica Topic Records.
Cuando volvió a América, Elliott descubrió que se había hecho famoso en la escena folk neoyorquina.