קזימיר השלישי מפולין מת ב-5 בנובמבר 1370. לואי הגיע לאחר הלוויה של דודו והורה להקים אנדרטה מפוארת משיש גותי למלך המנוח.הוא הוכתר למלך פולין בקתדרלת קרקוב ב-17 בנובמבר.קזימיר השלישי רצה את רכושו - כולל הדוכסות של סיארדז', ליצ'יקה ודובז'ין - לנכדו, קזימיר הרביעי, דוכס פומרניה.עם זאת, הפרלטים והאדונים הפולנים התנגדו להתפרקותה של פולין וצוואתו של קזימיר השלישי הוכרזה בטלה.לואי ביקר בגניזנו והפך את אמו הפולניה, אליזבת, לעורשת עצר לפני שחזר להונגריה בדצמבר.שתי בנותיו של דודו ששרדו (אנה וג'דוויגה) ליוו אותו, ותכשיטי הכתר הפולניים הועברו לבודה, מה שעורר אי שביעות רצון בקרב נתיניו החדשים של לואי.אשתו של לואי ילדה בת, קתרין, בשנת 1370, שבע עשרה שנים לאחר נישואיהם;בת שנייה, מרי, נולדה בשנת 1371. לאחר מכן עשה לואיס מספר ניסיונות לשמור על זכותן של בנותיו לרשת אותו.