Durante la Segunda Guerra Mundial fue miembro del frente nacionalista Balli Kombëtar y ejerció como primer ministro entre 1943 y 1944, en plena ocupación alemana.
Aunque se le concedió la amnistía en 1927, vivió exiliado en Austria y Francia.
Mitrovica regresó a Albania después de que se produjera la ocupación italiana en la Segunda Guerra Mundial.
En 1942 se unió al Balli Kombëtar, una guerrilla de resistencia albanesa contra los italianos pero que también era anticomunista, a diferencia del movimiento partisano.
A diferencia de los italianos, el gobierno de Berlín aceptó que Albania fuese soberana con un gobierno títere, del mismo modo que el Estado Independiente de Croacia, para el que se contó con los nacionalistas conservadores del Balli Kombëtar.