Era el hermano menor del pintor Anton Ferdinand Schaller.Dos años después entró en una fábrica de porcelana.El amor que sentía Schaller por la porcelana lo conservó durante el resto de su vida, por lo que fue el asesor artístico de la fábrica de porcelana hasta su muerte.En 1812 viajó a Roma con una beca, donde estuvo en contacto con el grupo de los pintores nazarenos y de los escultores Antonio Canova y Bertel Thorvaldsen.Entre sus esculturas destacan Belerofonte luchando contra la quimera y El joven Cupido, entre otras.