Se convirtió en una eminencia del piano luego de la Primera Guerra Mundial.
En 1926 empezó a ser el director del Musikverein de Lübeck y luego dirigió en Múnich.
En 1942 se trasladó de nuevo a Suiza, donde puso su carrera en suspenso durante la Segunda Guerra Mundial.
Fischer publicó varios libros sobre enseñanza, así como también uno sobre las sonatas para piano de Beethoven.
Durante sus sesiones de grabación para las sonatas para violín números 1 y 3 de Brahms tuvo que ir a Londres para llevar a cabo un tratamiento médico; allí le dijeron que estaba gravemente enfermo.