Aunque nacido en Greenville, creció en Washington; su padre, William, era dentista y su madre, Antoinette, profesora de secundaria.
Se graduó en música en el Virginia State College en 1942 y al año siguiente se trasladó a Nueva York, donde tocó, entre otros, con músicos como Ben Webster (con quien trabajó en el club Three Deuces de la Calle 52), Eddie South, Stuff Smith y Slam Stewart.
En 1958 se convirtió en director musical del programa televisivo de la NBC The Subject Is Jazz.
En 1980 formó parte de una comisión del National Endowment for the Arts para reclamar mayor apoyo para el jazz.
Impartió cursos sobre jazz en la Universidad de Long Island, en la Manhattan School of Music y en otras instituciones.