Criss fue el más joven de cuatro hijos, entre los que se encontraba Jon Oliva, vocalista con quien formó la agrupación Savatage.
[4] En 1983 la banda utiliza por primera vez el nombre Savatage, y lanza su primer trabajo discográfico: Sirens.
[4] En 1985 lanzan The Dungeons Are Calling, exhibiendo una variedad de estilos musicales.
El 17 de octubre de 1993, sobre las 3:30 a. m., Criss y su esposa Dawn viajaban hacia el norte por la autopista 301 dirección a Zephyrhills, Florida, cuando un conductor ebrio cruzó la mediana y chocó contra el Mazda RX-7 en el que viajaba la pareja.
Criss murió a causa del accidente automovilístico instantáneamente, y su esposa Dawn resultó gravemente herida.