El joven Prince comenzó su carrera trabajando en los viveros dirigidos por su padre y su hermano "Linnaean Botanic Garden".
Los viveros se vendieron al final de la Guerra Civil, y estudió derecho en la Universidad de Columbia, donde recibió un LL.B.
[1][2] Fue delegado a la Convención Nacional Republicana de Nueva York en 1868.
En la Convención Nacional Republicana de 1876, estuvo entre los que apoyaron a Rutherford B. Hayes sobre Roscoe Conkling.
[1] Rechazó esa opción, pero luego se convirtió en presidente del Tribunal Supremo Territorial de Nuevo México de 1878 a 1882.