En cualquier caso, en 1752 Carlos Eugenio nombró arquitecto a La Guêpière en su corte de Württemberg, para ocupar el puesto que había quedado vacío tras la inesperada muerte de Retti, en septiembre del año anterior.Primero, el ala del jardín fue destruida por un incendio en 1762, luego Carlos Eugenio se enfrentó a la oposición por su extravagancia y abandonó Stuttgart por Ludwigsburg.Aquí el palacio no sufrió graves daños durante la Segunda Guerra Mundial.Hacia 1767 trazó un plano para el nuevo edificio barroco del monasterio de Petershausen.También edificó varios edificios en Montbéliard (hoy en el Franco Condado), entonces principado dependiente de Württemberg, donde su mecenas Carlos Eugenio era stathouder.Sus obras en Francia incluyen interiores (desde entonces reemplazados) para la antigua biblioteca de Santa Genoveva.La única monografía dedicada a La Guêpière es Der Württembergische Oberbaudirektor Philippe de La Guêpière: Ein Beitrag zur Kunstgeschichte der Architektur am Ende des Spätbarock, ibra de Hans Andreas Klaiber, publicada en Stuttgart en 1959.
