III. lengyel Kázmér 1370. november 5-én halt meg. Lajos nagybátyja temetése után érkezett meg, és elrendelte, hogy az elhunyt királynak állítsanak fel egy pompás gótikus márványemlékművet.november 17-én a krakkói dómban lengyel királlyá koronázták.III. Kázmér hagyatékát – beleértve Sieradz, Łęczyca és Dobrzyń hercegségeit – unokájának, IV. Kázmérnek, Pomeránia hercegének adta át.A lengyel elöljárók és főurak azonban ellenezték Lengyelország felbomlását, és III. Kázmér végrendeletét érvénytelennek nyilvánították.Lajos meglátogatta Gnieznót, és lengyel anyját, Erzsébetet kormányzóvá tette, mielőtt decemberben visszatért Magyarországra.Nagybátyja két életben maradt lánya (Anna és Jadwiga) elkísérte, a lengyel koronaékszerek pedig Budára kerültek, ami elégedetlenséget szült Lajos új alattvalóiban.Lajos felesége 1370-ben, tizenhét évvel házasságuk után szült egy lányt, Katalint;1371-ben megszületett a második lánya, Mária. Ezt követően Lajos több kísérletet is tett, hogy megvédje leányai jogát, hogy őt örököljék.