[3]​ En el siglo XIX, fue descrito frecuentemente como un símbolo de la lucha por la independencia tanto en la literatura húngara como en la eslovaca.

No obstante, Mateo continuó utilizándolos a pesar de las órdenes del monarca.

Supuso Mateo que podría manipularlo a su antojo y continuar extendiendo su poder en el reino.

En 1305 murió el padre del joven Wenceslao, dejándolo desamparado y a merced de los nobles húngaros, ante lo cual el rey renunció al trono húngaro y se retiró a su hogar de Bohemia, donde reinó hasta su muerte.

En 1306 sus ejércitos tomaron la provincia de Zólyom, y Visegrado se convirtió definitivamente en la residencia permanente del oligarca húngaro.

Si bien parecía apoyar aparentemente al pretendiente Carlos Roberto y en 1310 el arzobispo Gentilis enviado por el Papa desde Aviñón le hizo jurar que le reconocía como supremo Señor de Hungría, Mateo realizaba a menudo ataques y robos en la ciudadela de Buda desde Visegrado donde se residenciaba.

Si bien esta batalla debilitó enormemente al oligarca, Carlos Roberto no logró vencerlo totalmente hasta que le dio muerte.

En 1321 falleció Mateo Csák, derrumbándose su "imperio" de territorios húngaros, con lo que finalmente se restableció casi en su totalidad el poder del monarca.