Antes de unirse a Clermont Foot Sylla, donde firmó su primer contrato profesional, estuvo en las categorías inferiores del SM Caen.

Después de cuatro años en Brétigny, Sylla pasó los siguientes cuatro¡ deambulando por los clubes en la región de Baja Normandía, tales como AS Montferrand, Malesherbes SC, y Caen.

Para la temporada 2010-11, Sylla subió al primer equipo por el entrenador Michel Der Zakarian.

Sylla posteriormente apareció como titular en el equipo de los próximos siete partidos.

Sus actuaciones en el país provocaron un interés del club alemán VfB Stuttgart y el italiano Udinense Calcio.