Ivayloning Vizantiya qoʻshinlariga qarshi davom etgan muvaffaqiyati Ivan Asen III ni poytaxtdan qochib, Vizantiya imperiyasiga qochishga majbur qildi, Jorj Terter I esa 1280 yilda imperator sifatida hokimiyatni qoʻlga oldi. Ivaylo va Ivan Asen III tahdidi olib tashlanishi bilan Jorj Terter I hokimiyatni qoʻlga kiritdi. 1281 yilda Sitsiliya qiroli Karl I, Serbiya Stefan Dragutin va Vizantiya imperatori Mixail VIII Paleologga qarshi Fesaliya bilan ittifoq tuzdi. Ittifoq muvaffaqiyatsizlikka uchradi, chunki Charlz Sitsiliya Vesperlari va 1282 yilda Sitsiliyaning ajralib chiqishi bilan chalg'idi, Bolgariya esa. Noʻgʻayxon boshchiligidagi Oltin Oʻrda moʻgʻullari tomonidan vayron qilingan.Serblarning yordamini izlab, Jorj Terter I 1284 yilda qizi Annani Serbiya qiroli Stefan Uroš II Milutinga unashtirdi.Vizantiya imperatori Maykl VIII Palaiologos 1282 yilda vafot etganidan beri Jorj Terter I Vizantiya imperiyasi bilan muzokaralarni qayta boshladi va birinchi xotinini qaytarishga harakat qildi.Bu oxir-oqibat shartnoma orqali amalga oshirildi va ikkala Marias imperator va garovga o'rinlarini almashishdi.Teodor Svetoslav ham Patriarx Ioaxim III ning muvaffaqiyatli topshirig'idan so'ng Bolgariyaga qaytib keldi va otasi tomonidan imperator etib tayinlandi, ammo 1285 yilda mo'g'ullarning navbatdagi bosqinidan keyin u No'g'ayxonga garovga yuborildi.Teodor Svetoslavning boshqa singlisi Yelena ham O'rdaga yuborilgan va u erda No'g'ayning o'g'li Chakaga uylangan.Uning surgun sabablari unchalik aniq emas.Jorj Paximeresning soʻzlariga koʻra, Noʻgʻayxonning Bolgariyaga qilgan hujumidan soʻng Jorj Terter taxtdan chetlatilgan, soʻngra Adrianopolga yoʻl olgan.Vizantiya imperatori Andronikos II Palaiologos, ehtimol, mo'g'ullar bilan qiyinchiliklardan qo'rqib, dastlab uni qabul qilishdan bosh tortdi va Jorj Terter Adrianopol yaqinida og'ir sharoitlarda kutib turdi.Sobiq Bolgariya imperatori oxir-oqibat Anadoluda yashash uchun yuborilgan.Jorj Terter I hayotining keyingi o'n yilini noma'lum holda o'tkazdi.