[1]​Su padre nunca ha sido identificado y su madre, Barbo Elisabeth Andrésen, se suicidó cuando él tenía 10 años de edad.

En 1970, a los quince años, fue elegido para el papel de Tadzio en Muerte en Venecia, dirigida por Luchino Visconti.

Andrésen posteriormente describió su incomodidad con respecto a su papel en Muerte en Venecia y su director Luchino Visconti: "cuando la veo ahora, puedo ver cómo el hijo de puta me sexualizó.

Tras el estreno de la película, Visconti presionó a Andrésen para que acudiera a un club gay, donde se sintió incómodo por las miradas fijas de hombres adultos; Andrésen describió más tarde la experiencia como «un infierno».

En 2003, Andrésen se enojó porque la escritora feminista Germaine Greer había utilizado, sin su consentimiento, una fotografía suya en la portada de su libro The Beautiful Boy.