Muy poco tiempo después él y su familia se trasladaron a China, donde el padre ya había estado como misionero, y no regresó a Europa hasta que ya tenía nueve años.Heinrich Witt se convirtió en jefe de la Misión Liebenzell en Changsha, y Ernst pasó nueve años de su vida en China con su hermana mayor y cuatro hermanos menores.En la primavera de 1920, Ernst y su hermano menor Otto fueron enviados a vivir con su tío paterno, un pastor protestante, en Müllheim, en cuya Realschule empezó a destacar en química y matemáticas.Tuvo allí un profesor, Karl Öttinger, que rápidamente se dio cuenta del extraordinario talento matemático de su alumno e hizo todo lo posible para permitirle avanzar rápidamente en la materia.El uno de mayo de ese mismo año se unió al NSDAP (el partido nazi) y también a su rama militar SA, según se dice incitado por Oswald Teichmüller.Entonces formaba parte de un equipo dirigido por Helmut Hasse, que había sido nombrado catedrático en 1934.Se cuenta que Witt siempre fue enteramente honesto y muchas anécdotas sobre su proverbial ingenuidad.
