Aunque solo tenía 21 años, Brown se distinguió rápidamente como abogado en el territorio de Wisconsin y, en 1845, fue elegido fiscal fiscal del condado de Milwaukee.
[1] Brown pronto estableció una sociedad legal con Thomas L. Ogden, quien era de Nueva York, y James Halliday.
[6] En cambio, en 1862, Brown se postuló para el Congreso como demócrata de guerra y derrotó al republicano en funciones John F. Potter para representar al 1.º distrito congresional de Wisconsin.
En 1869, los Brown Vivian en Dresde en el Reino de Sajonia (actual Alemania).
Regresaron a los Estados Unidos en 1873, donde ejerció nuevamente la abogacía en Milwaukee y administró sus diversas inversiones inmobiliarias.
En 1865, después de dejar el cargo, Brown se casó con Emily J. Stetson (la viuda del ex congresista de Maine Charles Stetson, que había muerto en 1863).
[6] Brown falleció en 1878 en Chicago, Illinois, a los 54 años, le sobrevivieron sus dos hijos y su segunda esposa.