Se quedó en la India hasta 1874 y después regresó como coronel a Inglaterra.
Más tarde, en octubre de ese año él sucedió a su padre como 2.º Barón Chelmsford.
En enero de 1879 Chelmsford invadió Zululandia y causó con ello la guerra anglo-zulú.
Aun así fue criticado por su papel en Isandlwana y por ello no pudo volver al campo otra vez, aunque le dieron aun así la posibilidad de terminar su carrera en Inglaterra en reconocimiento por su papel en Ulundi.
Chelmsford fue interpretado por Peter O'Toole en la película Amanecer zulú (1979), que describió los acontecimientos en la batalla de Isandlwana.