De joven pudo matricularse en el gimnasio de Marijampolė, donde mostraría predilección por la literatura polaca y autores como Adam Mickiewicz, así como por la historia y cultura propias del pueblo lituano.

[1]​ En su último año de carrera fundó con otros estudiantes lituanos la sociedad secreta Lietuva.

Ese grupo empezaría a publicar en 1889 el periódico mensual Varpas («La campana»), del cual fue director durante diez años.

[2]​[3]​ Kudirka estuvo publicando poemas y artículos satíricos orientados al despertar nacional lituano.

[4]​ Al mismo tiempo ejercía la medicina en Šakiai y Naumiestis, dos villas rurales en la frontera con Prusia Oriental que le permitían distribuir mejor sus textos.