Durante los veranos, Delpy (de edad cercana al hijo de Daubigny, Karl, también pintor) viajaba con la familia Daubigny, realizando excursiones a bordo del barco-estudio Le Botin.
En 1869, Delpy envió sus primeros cuadros al Salón de la Société Nationale des Beaux-Arts.
En 1875, presentó una paisaje nevado por primera vez en el Salón y recibió excelentes críticas de Jules-Antoine Castagnary.
Georges Petit, destacado galerista parisino de pintura francesa contemporánea, comenzó a vender sus cuadros y organizó varias exposiciones individuales para él.
Su hijo Henry-Jacques Delpy, nacido en Bois-le-Roi (Seine-et-Marne) en 1877 y muerto en 1957, fue también pintor paisajista.