Andrew III døde den 14. januar 1301. Hans død skapte en mulighet for rundt et dusin herrer, eller "oligarker", som på den tiden hadde oppnådd de facto uavhengighet av monarken for å styrke deres autonomi.De skaffet seg alle kongelige slott i en rekke fylker hvor alle var forpliktet til enten å akseptere deres overherredømme eller å forlate.Ved nyheten om Andrew IIIs død inviterte visekongen Šubić Charles av Anjou, avdøde Charles Martels sønn, til å kreve tronen, som skyndte seg til Esztergom hvor han ble kronet til konge.Imidlertid motsatte de fleste sekulære herrer hans styre og foreslo tronen til kong Wenceslaus II av Böhmens navnebror.Den unge Wenceslaus kunne ikke styrke sin posisjon og ga avkall til fordel for Otto III, hertugen av Bayern i 1305. Sistnevnte ble tvunget til å forlate kongeriket i 1307 av Ladislaus Kán.En pavelig legat overtalte alle herrene til å akseptere Charles av Anjous styre i 1310, men de fleste territoriene forble utenfor kongelig kontroll.Assistert av prelatene og et økende antall mindre adelsmenn startet Charles I en rekke ekspedisjoner mot de store herrene.Ved å utnytte mangelen på enhet blant dem, beseiret han dem én etter én.Han vant sin første seier i slaget ved Rozgony (dagens Rozhanovce, Slovakia) i 1312. Den mektigste herren, Matthew Csák bevarte imidlertid sin autonomi frem til sin død i 1321, mens familiene Babonić og Šubić bare ble underkuet i 1323.