Възползвайки се от разпадането на Византийската империя , Калоян завладява бивши византийски територии в Тракия.Първоначално той се опитва да осигури мирно разделяне на земите с кръстоносците (или "латинците").Той моли Инокентий III да им попречи да нападнат България .Но кръстоносците искат да изпълнят договора си, който разделя византийските територии помежду им, включително земите, за които Калоян претендира.Калоян дава подслон на византийски бежанци и ги убеждава да вдигат бунтове в Тракия и Македония срещу латинците.Бежанците, според разказа на Робърт от Клари, също обещали, че ще го изберат за император, ако нападне Латинската империя.Гръцките бюргери на Адрианопол (сега Одрин в Турция) и близките градове се надигнаха срещу латинците в началото на 1205 г. Калоян обеща, че ще им изпрати подкрепления преди Великден.Считайки сътрудничеството на Калоян с бунтовниците за опасен съюз, император Балдуин решава да предприеме контраатака и нарежда изтеглянето на войските си от Мала Азия.Той обсажда Адрианопол, преди да успее да събере всичките си войски.Калоян бърза към града начело на армия от над 14 000 български, влашки и кумански войни.Престорено отстъпление на куманите привлича тежката кавалерия на кръстоносците в засада в блатата северно от Адрианопол, което позволява на Калоян да им нанесе съкрушително поражение на 14 април 1205 г.Въпреки всичко битката е тежка и се води до късно вечерта.Основната част от латинската армия е елиминирана, рицарите са победени, а техният император Балдуин I е пленен във Велико Търново, където е затворен на върха на кула в крепостта Царевец.Мълвата бързо се разпространява из Европа за поражението на рицарите в битката при Адрианопол.Без съмнение това беше голям шок за тогавашния свят, поради факта, че славата на непобедимата рицарска армия беше известна на всички - от дрипави до богати.Чуването, че рицарите, чиято слава е обиколила надлъж и шир, които са превзели един от най-големите градове по онова време, Константинопол, столицата, чиито стени се носеха като несломими, беше опустошително за католическия свят.