Se vinculó a la Wehrmacht (Ejército regular) donde impartió educación deportiva.
En 1941 es nombrado como Enlace entre el SS Reichsführer y el Ministerio de los Territorios Ocupados del Este, de Alfred Rosenberg, cargo que desempeña hasta 1945.
En septiembre es nombrado Jefe de Personal para el Volksturm alemán, con sede en Douglasstraße, en Berlín-Grünewald.
A pesar de que solicitó mando de una unidad en el Frente del Este, Berger fue mantenido coordinando acciones militares desde Berlín donde era estratégicamente más útil.
En 1952, Berger se unió al Personal de un periódico mensual neonazi llamado "Nación Europa", el cual era publicado en Coburg, por el antiguo SS Sturmbannführer y Jefe del Archivo de Guerra de las Waffen SS en Praga, Arthur Ehrhardt.