También ha sido el hogar de un embajador francés y Lady Caroline Lamb, con quien el poeta romántico Lord Byron tuvo una famosa aventura.
Los últimos propietarios privados fueron la familia del político Whig George James Welbore Agar-Ellis, creado (1831) Baron Dover, cuyo título ha conservado.
[3] Todavía estaba en uso por la Oficina Colonial cuando los terroristas sionistas colocaron una bomba allí en abril de 1947.
[4] Cuando Escocia adquirió un parlamento descentralizado, las responsabilidades de la Oficina Escocesa se redujeron y, en 1999, pasó a llamarse Oficina de Escocia y Dover House permaneció como su edificio principal en Londres.
La Comisión Independiente para el Impacto de la Ayuda también tiene su sede en Dover House.