James nació en Chelsea (Londres), el hijo mayor del botánico John Gould Veitch (1839 – 1870) y de su mujer Jane Hodge.
En honor a su nacimiento, y también honrando a la Familia Veitch: En octubre de 1891 se embarcó en un tour de inspección por los mayores Jardines botánicos públicos, mantenidos por los gobiernos, en varios centros, y también visitando muchos establecimientos privados de horticultura, para verificar si los jardines Veitch debían ser enriquecidos con nuevas adiciones.
En Penang visitó los Jardines botánicos, cuyo curador Charles Curtis era un contratado de la empresa James Veitch & Sons como recolector profesional.
Sus viajes lo llevaron luego a Japón, donde se halla con Charles S. Sargent del Arnold Arboretum, y se comprometieron a una expedición conjunta de recolección de plantas incluyendo el ascenso juntos, al monte Hakkoda.
El negocio fue demasiado para James, ya que sufrió una crisis nerviosa.
Se había casado en 1898 con Lucy Elizabeth Wood, que le sobrevivió sin descendencia.
Doy se esforzó mucho para garantizar la autenticidad del libro: usó meticulosamente papel grueso, y ligeramente amarillento para reflejar el estilo victoriano original y hasta tenía una placa de latón estampado especial, replicando la cubierta de relieves.
Hortus Veitchii es una referencia esencial para las plantas introducidas durante la época victoriana, enumerando muchas que todavía están disponibles en los viveros de hoy y por lo tanto ayuda a los jardineros para replicar con exactitud los jardines históricos dentro de ese plazo.