Él tocó la batería en varias bandas en la década de 1990 como uno de los primeros integrantes de Suede, donde conocería a Justine Frischmann y el la cual grabó el lado a "Be My God".

En 1995 formó parte de la superbanda de brit pop Me Me Me junto a Stephen Duffy y Alex James lanzando el sencillo Hanging Around.

La banda se separó en 2001 y Justin vive en Devon, con la ex tecladista de Elastica y Heave Sharon Mew, lo que están está casados.

Ahora está involucrado en un proyecto junto a James Atkin, exvocalista y cantante de los CEM.

En 2013, debido a que el baterista de Suede, Simon Gilbert, contrajo tuberculosis.