তার চার্টারগুলির মধ্যে একটি উপসংহারে, চার্লস 1323 সালের মধ্যে তার রাজ্যের "সম্পূর্ণ অধিকার" নিয়েছিল। বছরের প্রথমার্ধে, তিনি তার রাজ্যের কেন্দ্রস্থলে টেমেসভার থেকে ভিসেগ্রাদে তার রাজধানী স্থানান্তর করেন।একই বছরে, অস্ট্রিয়ার ডিউকস 1322 সালে পবিত্র রোমান সম্রাট চতুর্থ লুইয়ের বিরুদ্ধে চার্লসের কাছ থেকে পাওয়া সমর্থনের বিনিময়ে প্রেসবার্গ (বর্তমানে স্লোভাকিয়ার ব্রাতিস্লাভা) ত্যাগ করে, যা তারা কয়েক দশক ধরে নিয়ন্ত্রণ করেছিল।কারপাথিয়ান পর্বতমালা এবং নিম্ন দানিউবের মধ্যবর্তী ভূমিতে রাজকীয় ক্ষমতা শুধুমাত্র নামমাত্র পুনরুদ্ধার করা হয়েছিল, যেটি 1320 এর দশকের গোড়ার দিকে বাসরব নামে পরিচিত একটি ভোইভোডের অধীনে একত্রিত হয়েছিল।যদিও বাসারব 1324 সালে স্বাক্ষরিত একটি শান্তি চুক্তিতে চার্লসের আধিপত্য মেনে নিতে ইচ্ছুক ছিলেন, তবে তিনি সেভেরিনের বানাতে দখল করা জমিগুলির নিয়ন্ত্রণ ত্যাগ করা থেকে বিরত ছিলেন।চার্লস ক্রোয়েশিয়া এবং স্লাভোনিয়াতে রাজকীয় কর্তৃত্ব পুনঃপ্রতিষ্ঠারও চেষ্টা করেছিলেন।তিনি 1325 সালে স্লাভোনিয়ার ব্যান অফ স্লাভোনিয়া, জন ব্যাবনিচকে বরখাস্ত করেন, তার স্থলাভিষিক্ত হন মিক্স অ্যাকোসকে। ব্যান মিকস ক্রোয়েশিয়া আক্রমণ করেন স্থানীয় প্রভুদের বশীভূত করার জন্য যারা রাজার অনুমোদন ছাড়াই ম্লাদেন সুবিকের প্রাক্তন দুর্গগুলি দখল করেছিলেন, কিন্তু ক্রোয়েশিয়ান প্রভুদের একজন, ইভান আইভান। নেলিপ্যাক, 1326 সালে নিষেধাজ্ঞার সৈন্যদের পরাজিত করে। ফলস্বরূপ, চার্লসের শাসনামলে ক্রোয়েশিয়ায় রাজকীয় ক্ষমতা শুধুমাত্র নামমাত্র ছিল।1327 সালে ব্যাবনিচি এবং কোসজেগিস প্রকাশ্য বিদ্রোহে উঠে, কিন্তু বান মিকস এবং আলেকজান্ডার কস্কি তাদের পরাজিত করেন।প্রতিশোধ হিসাবে, স্লাভোনিয়া এবং ট্রান্সডানুবিয়াতে বিদ্রোহী প্রভুদের অন্তত আটটি দুর্গ বাজেয়াপ্ত করা হয়েছিল।