[3]​ De ascendencia judía, Josh Silver conoció a Peter Steele desde su juventud, con quien entabló una fuerte amistad al compartir gustos musicales semejantes.

Josh y Peter formaron la banda de rock Fallout en 1979, donde Silver se desempeñó como teclista.

Al ser declarado público su fallecimiento, la banda decide separarse y Josh se retiraría del mundo musical convirtiéndose en paramédico, oficio que aún ejerce en la actualidad.

Como productor, Silver ha descubierto y trabajado con diversas bandas del panorama musical neoyorquino, como Life of Agony —para quienes produjo su álbum de debut, River Runs Red—[7]​ o Pist.On —que contaron con Silver como productor de Number One, su primer trabajo discográfico—.

[8]​ Josh ha citado al fallecido teclista y fundador de Deep Purple Jon Lord como su mayor influencia musical.