Ladislav je posljednje godine života proveo lutajući od mjesta do mjesta.Ugarska središnja vlast izgubila je moć jer su prelati i baroni vladali kraljevstvom neovisno o monarhu.Na primjer, Ivan Kőszegi i njegova braća su vodili ratove protiv Alberta I., austrijskog vojvode, ali Ladislav nije intervenirao, iako su Austrijanci zauzeli najmanje 30 utvrda duž zapadnih granica.Ladislava, koji je uvijek bio pristran prema svojim kumanskim podanicima, ubila su tri Kumana , po imenu Árbóc, Törtel i Kemence, u dvorcu Körösszeg (danas Cheresig u Rumunjskoj) 10. srpnja 1290. Mizse i Kuman Nikola, koji je bio brat Ladislavove kumanske ljubavnice, osvetio se za Ladislavovu smrt, poklavši ubojice.Nadbiskup Lodomer je nakon toga poslao dva redovnika u Beč da obavijeste Andriju o kraljevoj smrti.Uz pomoć redovnika, Andrija je maskiran napustio svoj zatvor i pohitao u Mađarsku.