ლადისლავ IV-ის უმცირესობის დროს, ბარონების მრავალი ჯგუფი - ძირითადად აბასები, ჩაკები, კუსეგები და გუტკელედები - იბრძოდნენ ერთმანეთის წინააღმდეგ უმაღლესი ძალაუფლებისთვის.ლადისლავი 1277 წელს პრელატების, ბარონების, დიდგვაროვნებისა და კუმანების კრებაზე გამოცხადდა ასაკობრივად. იგი მოკავშირე იყო გერმანიის რუდოლფ I-თან ბოჰემიის ოტოკარ II-ის წინააღმდეგ.მისმა ძალებმა გამორჩეული როლი შეასრულეს რუდოლფის გამარჯვებაში ოტოკარზე 1278 წლის 26 აგვისტოს მარჩფელდის ბრძოლაში.თუმცა, ლადისლავმა ვერ აღადგინა სამეფო ძალაუფლება უნგრეთში.პაპის ლეგატი, ფერმოს ეპისკოპოსი ფილიპე, ჩავიდა უნგრეთში, რათა დაეხმარა ლადისლავს თავისი ავტორიტეტის განმტკიცებაში, მაგრამ პრელატი შოკირებული იყო უნგრეთში ათასობით წარმართი კუმანების არსებობით.ლადისლავმა პირობა დადო, რომ აიძულებდა მათ ქრისტიანული ცხოვრების წესის მიღებას, მაგრამ მათ უარი განაცხადეს ლეგატის მოთხოვნებზე.ლადისლავმა გადაწყვიტა მხარი დაეჭირა კუმანებს, რისთვისაც ფილიპე ფერმოელმა იგი განკვეთა.კუმანებმა ლეგატი დააპატიმრეს, ლეგატის პარტიზანებმა კი ლადისლავი დაიპყრეს.1280 წლის დასაწყისში ლადისლავი დათანხმდა კუმანების დაყოლიებას ლეგატის წინაშე, მაგრამ ბევრმა კუმანმა ამჯობინა უნგრეთის დატოვება.ლადისლავმა დაამარცხა კუმანთა არმია, რომელიც შეიჭრა უნგრეთში 1282 წელს. უნგრეთი ასევე გადაურჩა მონღოლთა შემოსევას 1285 წელს. ლადისლავი იმ დროისთვის იმდენად არაპოპულარული გახდა, რომ ბევრმა მისმა ქვეშევრდომმა დაადანაშაულა იგი მონღოლების უნგრეთის შეჭრის წაქეზებაში.მას შემდეგ, რაც მან 1286 წელს დააპატიმრა თავისი ცოლი, ის ცხოვრობდა თავის კუმან ბედიასთან ერთად.სიცოცხლის ბოლო წლებში ის დახეტიალებდა მთელ ქვეყანაში თავის კუმან მოკავშირეებთან ერთად, მაგრამ ვეღარ აკონტროლებდა უძლიერეს ბატონებსა და ეპისკოპოსებს.პაპი ნიკოლოზ IV აპირებდა მის წინააღმდეგ ჯვაროსნული ლაშქრობის გამოცხადებას, მაგრამ სამმა კუმანმა მკვლელმა მოკლა ლადისლავი.