publicaron su primer álbum de estudio, Sink or Swim, con la discográfica XOXO Records.

El debut completo The Gaslight Anthem Sink or Swim fue bien recibido por los sitios de música independiente: punknews.org,[1]​ AbsolutePunk.net,[2]​ Ultimate Guitar[3]​ y las publicaciones más conocidas en Spin.com.

[7]​ En 2008, la banda interpretó "God's Gonna Cut You Down" para un álbum tributo a Johnny Cash: All Aboard!

[8]​ En 2009 la canción I'da Called You Woody, Joe fue presentada como parte de la banda sonora del videojuego Skate 2.

En 2009, The Gaslight Anthem anunció un acto de apoyo a Bruce Springsteen y Dave Matthews en el Hyde Park Calling.

Un crítico, desde varios puntos de vista escribió: "The Gaslight Anthem son como algo de ficción especulativa: esto es lo que la música pop sería, si Springsteen no hubiese escuchado a su productor, dejó a The Ramones grabar Hungry Heart y poner en marcha CBGB