Esta fortuna le permitió vivir holgadamente para dedicarse al arte, la arquitectura y la escritura; en arquitectura fue discípulo de sir William Chambers y en pintura de Alexander Cozens.

Entre sus descendientes directos se encuentran Rainiero III de Mónaco y el diseñador Egon von Fürstenberg.

En 1782 viajó a Italia y escribió el libro Dreams, Waking Thoughts and Incidents (1783); se trajo además algunos cuadros italianos de pintores famosos.

Poco después escribió su novela gótica más conocida, Vathek (1786), escrita originalmente en francés.

Como base de su propia biblioteca adquirió entera la del historiador Edward Gibbon.