उनको एउटा चार्टरको निष्कर्षमा, चार्ल्सले 1323 सम्म आफ्नो राज्यको "पूर्ण अधिकार" लिएका थिए। वर्षको पहिलो आधामा, उनले आफ्नो राजधानी टेमेस्भरबाट आफ्नो राज्यको केन्द्रमा रहेको भिसेग्रादमा सारियो।त्यही वर्ष, अस्ट्रियाका ड्यूकहरूले प्रेसबर्ग (अहिले स्लोभाकियाको ब्राटिस्लाभा) त्यागे, जसलाई उनीहरूले दशकौंसम्म नियन्त्रण गरेका थिए, उनीहरूले 1322 मा पवित्र रोमन सम्राट लुइस IV विरुद्ध चार्ल्सबाट प्राप्त गरेको समर्थनको बदलामा।शाही शक्ति केवल कार्पाथियन पर्वत र तल्लो डेन्युब बीचको भूमिहरूमा पुनर्स्थापित गरिएको थियो, जुन 1320 को शुरुवातमा बसरब भनेर चिनिने भोइभोड अन्तर्गत एकताबद्ध भएको थियो।यद्यपि बसरब 1324 मा हस्ताक्षर गरिएको शान्ति सन्धिमा चार्ल्सको आधिपत्य स्वीकार गर्न इच्छुक थिए, उनले सेभेरिनको बानाटमा कब्जा गरेका भूमिहरूको नियन्त्रण त्याग गर्न अस्वीकार गरे।चार्ल्सले क्रोएशिया र स्लाभोनियामा शाही अधिकार पुनर्स्थापित गर्ने प्रयास पनि गरे।उनले 1325 मा स्लाभोनियाको ब्यान, जोन बेबोनिकलाई खारेज गरे, उनको स्थानमा 1325 मा मिक्स एकोसलाई नियुक्त गरे। बान मिक्सले क्रोएसियामा आक्रमण गरे जसले स्थानीय शासकहरूलाई राजाको स्वीकृति बिना म्लाडेन सुबिचका पुराना महलहरू कब्जा गरेका थिए, तर क्रोएशियाका शासकहरूमध्ये एक, इभान आई। नेलिप्याकले 1326 मा प्रतिबन्धका सेनाहरूलाई पराजित गर्यो। फलस्वरूप, चार्ल्सको शासनकालमा क्रोएसियामा शाही शक्ति नाममात्र मात्र रह्यो।1327 मा बेबोनीकी र कोस्जेगिसहरू खुला विद्रोहमा उठे, तर बान मिक्स र अलेक्जेन्डर कोस्कीले तिनीहरूलाई पराजित गरे।प्रतिशोधमा, स्लाभोनिया र ट्रान्सडानुबियामा विद्रोही प्रभुहरूको कम्तिमा आठ किल्लाहरू जफत गरियो।