A medida que su fama creció se involucró en la polémica, con los críticos Maximiliano Harden y Herbert Ihering en particular.
Sus libros fueron quemados en mayo de 1933 por los nazis cuando llegaron al poder; Kerr había atacado el partido nazi en público, y él ya se había ido al exilio con su familia.
Después de visitar Praga, Viena, Suiza y Francia, llegó a Londres en 1935 donde se estableció, en la miseria.
Fue fundador de la Deutschen Kulturbund Freier, y trabajó para el club PEN alemán.
A partir de 2004 sus obras se hacen disponibles y ampliamente leídas en Alemania.