Procedente del Booker T. Washington High School en Atlanta, donde disputó el McDonald's All American en 1989, Spencer jugó al baloncesto universitario en la Universidad de Georgia, en el Connors State Community College y en la Universidad de Nevada, Las Vegas.
Con UNLV llegó hasta la Final Four de la NCAA en 1991 tras promediar 6.4 puntos y 4 rebotes durante la temporada regular.
Al año siguiente, en su última campaña, Spencer aportó 14.8 puntos y 8.1 rebotes en 28 partidos.
En su segundo año firmó sus mejores estadísticas con 8,9 puntos, 5,5 rebotes y 1,7 tapones en 76 partidos, 63 de ellos como titular.
Durante su carrera en la NBA anotó 923 puntos y cogió 555 rebotes en 157 partidos jugados.