Hinimok ni Casimir III ng Poland si Louis na makialam sa kanyang pakikidigma sa mga Lithuanian na sumakop sa Brest, Volodymyr-Volynskyi, at iba pang mahahalagang bayan sa Halych at Lodomeria noong mga nakaraang taon.Sumang-ayon ang dalawang monarko na ang Halych at Lodomeria ay isasama sa Kaharian ng Hungary pagkatapos ng kamatayan ni Casimir.Pinangunahan ni Louis ang kanyang hukbo sa Cracow noong Hunyo 1351. Dahil nagkasakit si Casimir, si Louis ang naging tanging kumander ng nagkakaisang hukbong Poland at Hungarian.Nilusob niya ang mga lupain ng prinsipe ng Lithuanian, si Kęstutis, noong Hulyo.Tila tinanggap ni Kęstutis ang pamumuno ni Louis noong Agosto 15 at pumayag na magpabinyag, kasama ang kanyang mga kapatid, sa Buda.Gayunpaman, walang ginawa si Kęstutis upang matupad ang kanyang mga pangako pagkatapos na umatras ang mga tropang Polako at Hungarian.Sa pagtatangkang makuha si Kęstutis, bumalik si Louis, ngunit hindi niya natalo ang mga Lithuanians, na pinatay pa ang isa sa kanyang mga kaalyado, si Boleslaus III ng Płock, sa labanan.Bumalik si Louis sa Buda bago ang 13 SetyembreKinubkob ni Casimir III si Belz at sumama si Louis sa kanyang tiyuhin noong Marso 1352. Sa panahon ng pagkubkob, na natapos nang hindi sumuko sa kuta, si Louis ay nasugatan nang husto sa kanyang ulo.Si Algirdas, Grand Duke ng Lithuania, ay umupa ng mga mersenaryo ng Tatar na lumusob sa Podolia, bumalik si Louis sa Hungary dahil natakot siya sa pagsalakay ng Tatar sa Transylvania.Ipinahayag ni Pope Clement ang isang krusada laban sa mga Lithuanians at Tatar noong Mayo, na pinahintulutan si Louis na mangolekta ng ikapu mula sa mga kita ng Simbahan sa susunod na apat na taon.