Hardenbergh nació en Nuevo Brunswick, Nueva Jersey, en el seno de una familia neerlandesa, y estudió en el Instituto Hasbrouck de Jersey City.
[1] Gracias a algunos contactos de su familia, obtuvo su primer contrato para construir tres edificios en la Universidad Rutgers en Nuevo Brunswick, Nueva Jersey: la ampliación del Edificio Alexander Johnston (1871) y el diseño y construcción del Edificio de Geología (1872) y de la Capilla Kirkpatrick (1873).
Posteriormente, Hardenbergh recibió encargos para construir el Hotel Waldorf (1893) y el hotel contiguo Astoria (1897), para William Waldorf Astor y la Señora Astor, respectivamente.
Los dos compitieron entre sí hasta acabar unidos como Hotel Waldorf-Astoria, que sería demolido en 1929 para la construcción del Empire State Building.
Hardenbergh fue elegido para el Instituto Americano de Arquitectos en 1861 y se convirtió en miembro en 1877.