La canción nació a partir de otra idea que llevaba más tiempo desarrollándose, e iba a ser incluida en su grandes éxitos de 2007 titulada Absolute Garbage.
«Girls Talk» fue el tercer lanzamiento producido por Garbage para el Record Store Day, posterior a la publicación de una versión de «Because the Night» junto a Screaming Females, además de «Blood for Poppies»/«Battle In Me» en 2012.
La portada del sencillo fue desarrollada por Ryan Corey de la firma Smog Design a partir de una fotografía tomada por la directora Sophie Muller hace cuatro años.
El sencillo fue también lanzado como vinilo de 10" en color verde, a pesar de que en Reino Unido se produjeron también en negro.
En dicho formato también se incluyó la canción «Time Will Destroy Everything», grabada durante la producción del quinto álbum de estudio de la banda titulado Not Your Kind of People, cuyo lanzamiento fue en 2012, además de haber sido usada como banda sonora introductoria durante su gira mundial para promocionar el disco.