Kazimir III i Polonisë i kërkoi Luigjit të ndërhynte në luftën e tij me Lituanezët që kishin pushtuar Brestin, Volodymyr-Volynskyi dhe qytete të tjera të rëndësishme në Halych dhe Lodomeria në vitet e mëparshme.Dy monarkët ranë dakord që Halych dhe Lodomeria do të integroheshin në Mbretërinë e Hungarisë pas vdekjes së Casimirit.Luigji udhëhoqi ushtrinë e tij në Krakov në qershor 1351. Për shkak se Kasimiri u sëmur, Luigji u bë komandanti i vetëm i ushtrisë së bashkuar polake dhe hungareze.Ai pushtoi tokat e princit lituanez, Kęstutis, në korrik.Kęstutis me sa duket pranoi suzerenitetin e Louis më 15 gusht dhe ra dakord të pagëzohej, së bashku me vëllezërit e tij, në Buda.Megjithatë, Kęstutis nuk bëri asgjë për të përmbushur premtimet e tij pasi trupat polake dhe hungareze u tërhoqën.Në një përpjekje për të kapur Kęstutis, Louis u kthye, por ai nuk mundi t'i mposht lituanezët, të cilët madje vranë një nga aleatët e tij, Boleslaus III të Płock, në betejë.Louis u kthye në Buda para 13 shtatoritKazimiri III rrethoi Belzin dhe Luigji u bashkua me xhaxhain e tij në mars 1352. Gjatë rrethimit, i cili përfundoi pa dorëzimin e fortesës, Louis u plagos rëndë në kokë.Algirdas, Duka i Madh i Lituanisë, punësoi mercenarë tatarë që hynë në Podolia, Louis u kthye në Hungari sepse kishte frikë nga një pushtim tatar i Transilvanisë.Papa Klementi shpalli një kryqëzatë kundër lituanezëve dhe tatarëve në maj, duke autorizuar Luigjin të mbledhë një të dhjetë nga të ardhurat e Kishës gjatë katër viteve të ardhshme.