Apodado The Cat, pasó la mayor parte de su carrera como jugador en el Wolverhampton Wanderers, donde ganó el Campeonato de la Liga y la Copa FA.

En el momento de su muerte, Williams era el más anciano del fútbol internacional inglés.

[1]​ Williams comenzó a jugar fútbol competitivo cuando aún era joven, como miembro de la 19.ª Wolverhampton Company of The Boys' Brigade (Bradley Methodist Church).

Fue trasladado en forma permanente y se convirtió en profesional en abril de 1937.

Encontró tiempo entre sus ocupaciones para llegar como invitado para los encuentros amistosos del Nottingham Forest y el Chelsea.