Ludvík navrhl vzdát se Neapolského království, pokud Klement sesadí Joannu z trůnu.Poté, co papež odmítl, Ludvík odjel na své druhé neapolské tažení v dubnu 1350. Potlačil vzpouru, ke které došlo mezi jeho žoldáky, zatímco on a jeho vojáci čekali na příchod dalších jednotek do Barletty.Při pochodu směrem k Neapoli čelil odporu v mnoha městech, protože jeho předvoje, kteří byli pod velením Stephena Lackfiho, prosluli svou krutostí.Během kampaně Louis osobně vedl útoky a šplhal na městské hradby spolu se svými vojáky, čímž ohrožoval svůj vlastní život.Při obléhání Canosa di Puglia spadl Louis ze žebříku do příkopu, když ho obránce pevnosti zasáhl kamenem.Bez váhání se ponořil do řeky, aby zachránil mladého vojáka, který byl na jeho rozkaz smeten při průzkumu brodu.Šíp probodl Louisovu levou nohu během obléhání Aversy.Po pádu Aversy do rukou maďarských jednotek 3. srpna královna Joanna a její manžel znovu uprchli z Neapole.Ludvík se však rozhodl vrátit do Maďarska.Podle současného historika Mattea Villaniho se Ludvík pokusil „opustit království bez ztráty tváře“ poté, co mu došly peníze a zažil odpor místního obyvatelstva.