El jardín se nombra con la palabra « Kampong » que proviene del idioma Malayo o del Javanés para designar a una aldea o un grupo de casas, esto se debe a que algunos de los primeros cultivos en esta plantación vinieron de Indo-Malasia, traídos por el reconocido explorador y horticultor David Fairchild, que introdujo estas especies en los Estados Unidos, y "The Kampong" comenzó originalmente como su colección personal de plantas.
Buscó en todo el mundo las plantas que pudieran ser útiles e introducidas con éxito en los Estados Unidos.
Después de su muerte, la tierra fue comprada por la Dra Catherine Hauberg Sweeney, botánica y conservacionista.
La Dra Sweeney mantuvo el jardín de Fairchild siendo el elemento fundamental en su preservación para el uso futuro, asegurando su listado en el registro nacional de lugares históricos.
The Kampong está abierto al público visitante en general.