Nacido en Bath, fue el hijo menor de Thomas Linley y Mary Johnson (1729–1820).
[1][2] Fue educado en Harrow y luego en la St Paul's School, y su padre y Carl Friedrich Abel le dieron clases particulares de música.
[3] Entró en la Compañía Británica de las Indias Orientales y estuvo en la India en 1790-5 y 1800-5, ocupando un puesto de escritor en su Colegio de Madrás.
Se retiró de la compañía en 1810 y se dedicó a cantar, componer glees y canciones y escribir literatura.
Legó su colección de retratos familiares a la Dulwich Picture Gallery.