Андрей III умира на 14 януари 1301 г. Смъртта му създава възможност за около дузина лордове или „олигарси“, които по това време са постигнали фактическа независимост от монарха, да укрепят своята автономия.Те придобиха всички кралски замъци в редица графства, където всеки беше задължен или да приеме тяхното върховенство, или да напусне.При новината за смъртта на Андрей III, вицекрал Шубич кани Карл Анжуйски, син на покойния Карл Мартел, да претендира за трона, който побърза за Естергом, където беше коронясан за крал.Повечето светски лордове обаче се противопоставиха на управлението му и предложиха трона на едноименния син на крал Вацлав II от Бохемия.Младият Вацлав не може да укрепи позицията си и се отказва в полза на Ото III, херцог на Бавария през 1305 г. Последният е принуден да напусне кралството през 1307 г. от Ладислав Кан.Папски легат убеждава всички лордове да приемат управлението на Чарлз Анжуйски през 1310 г., но повечето територии остават извън кралския контрол.Подпомогнат от прелатите и нарастващ брой по-малки благородници, Чарлз I предприе поредица от експедиции срещу великите лордове.Възползвайки се от липсата на единство между тях, той ги победи един по един.Той печели първата си победа в битката при Розгони (днешно Рожановце, Словакия) през 1312 г. Но най-могъщият владетел, Матю Чак, запазва автономията си до смъртта си през 1321 г., докато семействата Бабонич и Шубич са подчинени едва през 1323.