Nació casi diez años después que su hermano más cercano, Carlos Luis, razón por la cual tenía una relación muy distante con sus tres hermanos mayores, quienes, por el contrario, estaban muy unidos entre sí.
Familiarmente conocido como Hetzi o Luziwuzi, fue siempre el hijo preferido por su madre.
Se integró en la carrera militar, como era tradición en la familia imperial; fue nombrado general de infantería y puesto a cargo de un regimiento que llevaba su nombre.
Esto tuvo su punto culminante cuando fue descubierto manteniendo relaciones sexuales con un joven menor de edad en el Centralbad.
Ante el escándalo, que le valió el sobrenombre de Archiduque del Baño, su hermano el emperador lo exilió de la corte, enviándolo a vivir al palacio Schloß Klessheim, a 4 km de Salzburgo, con una servidumbre únicamente femenina, que actuaban más como carceleras que sirvientes del príncipe, y prohibiéndole todo contacto masculino.