Vzestup a aktivity Victual Brothers měly hluboký dopad na baltský obchod na konci 14. století, což bylo kritické období v historii Švédska a širšího pobaltského regionu. Švédsko se svou strategickou polohou u Baltského moře bylo úzce spjato s námořním obchodem, který spojoval Skandinávii, Hanzovní ligu a další mocnosti.
Během pozdního 14. století bylo Švédsko zapleteno do mocenského boje o skandinávský trůn, zejména mezi královnou Markétou I. Dánskou a Albertem Meklenburským, který byl švédským králem od roku 1364. Tento konflikt, součást širších skandinávských válek o dědictví , vytvořil příležitost pro Victual Brothers. Victuální bratři, kteří byli v roce 1392 najati vévody z Meklenburska, aby podporovali Alberta v jeho boji proti královně Markétě, měli za úkol zásobovat Stockholm, který byl obležený Margaretinými silami.
Švédsko v té době bylo kvůli své ekonomické stabilitě silně závislé na baltském obchodu, přičemž pro jeho bohatství byly zásadní vývozy jako dřevo, železo a měď. Victual Brothers, pojmenovaní po svém počátečním poslání poskytovat „zásoby“ (zásoby) obleženému městu, rychle přešli ze lupičů podporujících mecklenburgskou věc na úplné piráty. Začali lovit právě ty obchodní cesty, které byly pro Švédsko a jeho pobaltské sousedy životně důležité, což vedlo k téměř kolapsu námořního obchodu v regionu. Pobřežní města, včetně švédských přístavů jako Turku a Vyborg, byla vypleněna, což dále destabilizovalo region a ohrožovalo schopnost Švédska udržet svou ekonomiku.
Zabavení Gotlandu bratry Victualovými v roce 1394 znamenalo vrchol jejich moci a jejich kontroly nad centrálním Baltem. Gotland, klíčový ostrov pro obchod v Baltském moři, byl také významným švédským územím a jeho dobytí piráty zasadilo švédským zájmům velkou ránu. Ze své základny ve Visby Victual Brothers nejen narušili obchod, ale také přímo ohrozili švédskou územní kontrolu v Baltském moři.
Upevnění moci královny Margaret, které vedlo v roce 1397 ke vzniku Kalmarské unie, sjednocující Dánsko, Norsko a Švédsko pod její vládou, bylo zlomovým bodem. Kalmarská unie byla politická aliance zaměřená na posílení skandinávských království proti vnějším hrozbám, včetně rostoucího vlivu Hanzy a pokračujícího pirátství. Se svou politickou dominancí se Margaret snažila ukončit pirátství, které pustošilo baltský obchod. Spojila se s Řádem německých rytířů a v roce 1398 pod vedením velmistra Konrada von Jungingena zahájil Řád německých rytířů vojenskou kampaň s cílem znovu dobýt Gotland. Řád německých rytířů, zkušený v pozemním i námořním válčení, shromáždil velkou invazní sílu, která se plavila na ostrov. Úspěšně dobyli Visby, zničili opevnění pirátů a vyhnali Victual Brothers z Gotlandu, čímž fakticky ukončili jejich vládu nad Baltským mořem. V roce 1409 prodal Řád německých rytířů Gotland Kalmarské unii.