Як вынікае з адной з яго хартый, Карл атрымаў «поўнае валоданне» сваім каралеўствам да 1323 г. У першай палове года ён перанёс сваю сталіцу з Тэмешвара ў Вышаград у цэнтры свайго каралеўства.У тым жа годзе герцагі Аўстрыі адмовіліся ад Прэсбурга (цяпер Браціслава ў Славакіі), які яны кантралявалі дзесяцігоддзямі, у абмен на падтрымку, якую яны атрымалі ад Карла супраць Людовіка IV, імператара Свяшчэннай Рымскай імперыі, у 1322 годзе.Каралеўская ўлада была толькі намінальна адноўлена на землях паміж Карпацкімі гарамі і Ніжнім Дунаем, якія да пачатку 1320-х гадоў былі аб'яднаны пад кіраўніцтвам ваяводы, вядомага як Басараб.Нягледзячы на ​​тое, што Басараб быў гатовы прыняць сюзерэнітэт Карла ў мірным дагаворы, падпісаным у 1324 годзе, ён устрымаўся ад адмовы ад кантролю над землямі, якія ён заняў у Севярынскім банаце.Карл таксама спрабаваў аднавіць каралеўскую ўладу ў Харватыі і Славоніі.Ён адправіў у адстаўку бана Славоніі Яна Бабоніча, замяніўшы яго на Мікеса Акоша ў 1325 годзе. Бан Мікч уварваўся ў Харватыю, каб падпарадкаваць сабе мясцовых уладароў, якія захапілі былыя замкі Младэна Субіча без адабрэння караля, але адзін з харвацкіх уладароў, Іван I Неліпач, разбіў войскі бана ў 1326 г. Такім чынам, каралеўская ўлада заставалася толькі намінальнай у Харватыі падчас праўлення Карла.Бабонічы і Кёсегі паднялі адкрытае паўстанне ў 1327 годзе, але бан Мікч і Аляксандр Кёцкі разграмілі іх.У адплату ў Славоніі і Задунайі было канфіскавана не менш за восем крэпасцей мяцежных паноў.