Nacida en el Castillo Gordon en Escocia,[2] Lady Charlotte Gordon era la hija mayor de Alexander Gordon, cuarto duque de Gordon, y su esposa Jane Maxwell.
[1] En 1814, la familia se trasladó a Bruselas, donde la duquesa ofreció el baile en el que el duque de Wellington recibió la confirmación de que el Ejército del Norte, al mando de Napoleón Bonaparte, había entrado en el territorio del Reino Unido de los Países Bajos, cerca de Charleroi (en lo que ahora es el Reino de Bélgica).
La duquesa y su familia continuaron viviendo en Bruselas hasta 1818, cuando su marido fue nombrado gobernador general de la Norteamérica británica.
La duquesa enviudó en 1819 y en 1836 heredó las vastas propiedades de Gordon tras la muerte de su hermano, George Gordon, quinto duque de Gordon, que no había dejado descendencia.
[1] El duque y la duquesa tuvieron siete hijos y siete hijas: