Antes de ser lanzado como sencillo aparte, "I Feel Love" correspondía al lado B de la canción "Can't We Just Sit Down (And Talk It Over)", el primero del álbum I Remember Yesterday.
A pesar de que el sencillo no tuvo mucho éxito, "I Feel Love" tuvo un impacto enorme lo cual provocó que fuera lanzado como sencillo aparte en julio de 1977 a nivel internacional.
Dado que no estaba disponible para el público general, se hizo muy buscado por coleccionistas.
Bronski Beat grabó la canción en un medley con "Johnny Remember Me" y "Love to Love You Baby" de Donna Summer en 1985, con la colaboración de Marc Almond.
Este tuvo incluso más éxito alcanzando el número 3 in el UK singles chart.
El sencillo se convirtió en un hit en el Reino Unido, alcanzó el #8 en el UK Singles Chart, siendo la segunda vez que la canción entra al Top 10 en dicho país.