Down House fue la casa del naturalista inglés Charles Darwin y su familia.
Compró Down House por 2200 £, aunque inicialmente el reverendo James Drummond le pidió 2.500 £.
Los otros hijos que tuvo el matrimonio nacieron en la misma casa: "Etty" (1843), George (1845), "Bessy" (1847), Francis (1848), Leonard (1850), Horace (1851) y Charles Waring Darwin (1856).
En 1962, Sir Hedley Atkins (1905-1983), último Presidente del Real Colegio de Cirujanos, se mudó a Down House junto a su mujer adquiriendo el papel de conservador honorario.
Down House fue propuesta por el gobierno, junto con sus alrededores, a Patrimonio Mundial de la Humanidad.