Fue un fértil compositor del periodo clásico vienés, componiendo 32 óperas y singspiels, muchos de cuyos libretos escribió él mismo.
En vida, su mayor éxito musical fue el singspiel Doktor und sein Apotheker, que fue representado por toda Europa.
En 1745 a la edad de 6 años empezó a estudiar el violín, logrando obtener el patronato del príncipe Jose Federico de Sajonia-Hildburghausen.
Esto le permitió continuar el estudio del violín bajo Francesco Trani y la composición bajo Giuseppe Bonno.
En 1773 obtuvo el título de nobleza, agregando desde entonces "von Dittersdorf" a su nombre.