Hilpert permaneció en este puesto por el siguiente año y medio.

El 20 de enero de 1943 se convirtió en Comandante general del LIV Cuerpo, que estaba desplegado bajo el 18.º Ejército del Grupo de Ejércitos Norte ante Leningrado y que estuvo involucrado en duras batallas defensivas durante la Operación Iskra.

Durante las últimas etapas de la II Guerra Mundial, Hilpert comandaba las tropas alemanas que habían sido rodeadas por el Ejército Rojo en la bolsa de Curlandia.

Hilpert se rindió, junto a su estado mayor, y tres divisiones del XXXVIII Cuerpo al mariscal Leonid Govorov.

Hilpert envió el siguiente mensaje a sus tropas: Fue hecho prisionero por los soviéticos y murió dos años más tarde como prisionero en Moscú el 1 de febrero de 1947.