Brent nació en el seno de una familia católica en Woodstock, (Virginia).Brent fue redesignado para el puesto de alcalde siete veces pos Thomas Jefferson y tres por James Madison, finalmente abandonó la alcaldía en junio de 1812.Brent no cobró nada durante su alcaldía.La casa de Brent se localiza en la esquina suroeste de lo que ahora es Maryland Avenue y 12th Street, Ciudad de Washington, aunque él poseía numerosas tierras en la región.En 1817, construyó la Mansión Brentwood (que ahora forma parte de la Universidad Gallaudet) como regalo de bodas para su hija.