Richardson asistió a la preparatoria Gateway Institute of Technology High School en San Luis, Misuri, donde practicó fútbol americano, béisbol, baloncesto y atletismo.
Al finalizar la preparatoria, fue considerado como un atleta cinco estrellas y el mejor defensive tackle de la nación por Rivals.com.
En su última temporada, ocupó el segundo lugar del equipo con 75 tacleadas, cifra que lideró a todos los tackles defensivos de la Southeastern Conference.
También tuvo 10.5 tacleadas para pérdida de yardas, cuatro capturas y tres balones sueltos forzados, por lo que fue nombrado al primer equipo All-SEC.
En ambas temporadas formó equipo en la línea defensiva con Larry Ogunjobi, Myles Garrett y Olivier Vernon.