Ya desde niño mostró notables dotes para tocar el piano: interpretó una sonatina en público a la edad de cuatro años y tocó la percusión en la orquesta desde temprana edad.
[2] En 1835 fue alumno de Christian Heinrich Rinck en Darmstadt, Alemania, y un año más tarde se trasladó a París para ejercer como profesor y concertista, donde fue muy respetado y apreciado por la sociedad parisina; durante doce años estuvo a menudo asociado con músicos de renombre como Luigi Cherubini, Frédéric Chopin o Franz Liszt, y disfrutó de la amistad de grandes figuras literarias como Alfred de Musset y George Sand.
En 1853 se mudó a Mánchester, donde tres años más tarde fue nombrado director del Gentlemen's Concert.
El mismo año contrajo matrimonio con la violinista Wilma Neruda, con la que en 1889 hizo un viaje de conciertos por Australia.
[2] Charles Edward Hallé, hijo de su primera esposa, se convirtió en pintor y director de galería, mientras que su hija, Elinor Hallé, era escultora e inventora.