Fue hijo del barón Albert von Hügel (1803-1865), capitán de caballería en el reino de Wurttemberg y la baronesa Marie von Uexküll-Gyllenband (1811-1862).
Su padre era además chambelán (kammerherr) del rey de Wurttemberg.
[4][5] La hermana soltera de Amalia, Claudia, se instaló en una casa de estilo suizo (Schweizerhaus) cercana al castillo donde viviría hasta su muerte en 1894.
Sus cuñados los duques de Teck no apreciaban especialmente a Paul.
[6] En el invierno de 1869-1870 realizó un crucero por el Nilo junto con su esposa.