Nizamnamələrindən birinin bağlandığı kimi, Çarlz 1323-cü ilə qədər öz səltənətinə "tam sahiblik" etmişdi. İlin birinci yarısında o, paytaxtını Temesvardan krallığının mərkəzindəki Vişeqrada köçürdü.Elə həmin il Avstriya hersoqları 1322-ci ildə Müqəddəs Roma İmperatoru IV Lüdovişə qarşı Çarlzdan aldıqları dəstək müqabilində onilliklər boyu nəzarət etdikləri Pressburqdan (indiki Slovakiyada Bratislava) imtina etdilər.Kral hakimiyyəti yalnız 1320-ci illərin əvvəllərində Basarab kimi tanınan bir voivoda altında birləşən Karpat dağları ilə Aşağı Dunay arasındakı torpaqlarda nominal olaraq bərpa edildi.Basarab 1324-cü ildə imzalanmış sülh müqaviləsində Çarlzın suzerenliyini qəbul etməyə razı olsa da, Severin Banatında işğal etdiyi torpaqlara nəzarətdən imtina etməkdən çəkindi.Çarlz həmçinin Xorvatiya və Slavoniyada kral hakimiyyətini bərpa etməyə cəhd etdi.O, 1325-ci ildə onu Mikcs Akos ilə əvəz edən Con Babonić-i ləğv etdi. Nelipac, 1326-cı ildə qadağanın qoşunlarını darmadağın etdi. Nəticədə, Çarlzın hakimiyyəti dövründə Xorvatiyada kral hakimiyyəti yalnız nominal olaraq qaldı.Babonići və Kőszegis 1327-ci ildə açıq üsyana qalxdılar, lakin Ban Mikcs və Alexander Köcski onları məğlub etdi.Cavab olaraq, Slavoniya və Transdanubiyada üsyankar lordların ən azı səkkiz qalası müsadirə edildi.