Dillard sirvió en el ejército durante la Segunda Guerra Mundial, y luego regresó a la Universidad.
En cambio sí lo hizo en la prueba de 100 metros lisos, pese a no ser su especialidad, como tercer integrante del equipo.
El cuarteto lo formaban por este orden Norwood "Barney" Ewell, Lorenzo Wright, Harrison Dillard y Mel Patton.
Al igual que en 1948, ganó otra medalla con el equipo estadounidense de relevos 4 x 100 metros.
Cuatro años más tarde Dillard intentó clasificarse para ir a los Juegos Olímpicos de Melbourne 1956 pero no lo consiguió.