Iskoristivši raspad Bizantskog Carstva , Kalojan je zauzeo bivše bizantske teritorije u Trakiji.U početku je pokušao osigurati mirnu podjelu zemalja s križarima (ili "Latinima").Zamolio je Inocenta III da ih spriječi u napadu na Bugarsku .Međutim, križari su željeli provesti svoj ugovor koji je između njih podijelio bizantske teritorije, uključujući zemlje koje je Kalojan polagao.Kalojan je pružio utočište bizantskim izbjeglicama i nagovorio ih da dignu pobune u Trakiji i Makedoniji protiv Latina.Izbjeglice su, prema izvještaju Roberta od Clarija, također obećale da će ga izabrati za cara ako napadne Latinsko Carstvo.Grčki građani Adrianopola (danas Edirne u Turskoj) i obližnjih gradova ustali su protiv Latina početkom 1205. Kaloyan je obećao da će im poslati pojačanje prije Uskrsa.Smatrajući Kalojanovu suradnju s pobunjenicima opasnim savezništvom, car Balduin je odlučio krenuti u protunapad i naredio povlačenje svojih trupa iz Male Azije.Postavio je opsadu Adrianopola prije nego što je uspio sakupiti sve svoje trupe.Kalojan je požurio u grad na čelu vojske od više od 14.000 bugarskih, vlaških i kumanskih ratnika.Lažno povlačenje Kumana privuklo je tešku konjicu križara u zasjedu u močvarama sjeverno od Adrianopola, što je omogućilo Kalojanu da im nanese porazan poraz 14. travnja 1205.Unatoč svemu, bitka je teška i vodi se do kasnih večernjih sati.Glavnina latinske vojske je eliminirana, vitezovi su poraženi, a njihov car, Balduin I., zarobljen je u Velikom Trnovu, gdje je zaključan na vrhu kule u tvrđavi Tsarevets.Europom se brzo proširila vijest o porazu vitezova u bitci kod Adrianopola.Bez sumnje, bio je to veliki šok za tadašnji svijet, jer su slavu nepobjedive viteške vojske znali svi, od onih u dronjcima do onih u bogatstvu.Čuti da su vitezovi, čija je slava nadaleko proputovala, zauzeli jedan od najvećih gradova tog vremena, Konstantinopol, prijestolnicu čije se zidine šuškalo da su nesalomive, za katolički je svijet bilo porazno.