В лице побеждённых и победителей столкнулись две совершенно непохожие друг на друга культуры, две различные системы государственной и церковной организации, причём число пришельцев было сравнительно невелико (о нём можно судить до некоторой степени по тому, что венецианцы обязались перевезти на своих кораблях 33 500 крестоносцев). В среде самих завоевателей происходили частые несогласия, а между тем им постоянно приходилось вести упорную борьбу с возникшими на развалинах Византийской империи самостоятельными владениями. Так, в эпоху взятия Константинополя крестоносцами в самой Фракии ещё держались самостоятельно бывшие императоры
Алексей Мурцуфл и
Алексей Ангел; в
Эпире утвердился, как самостоятельный деспот, Михаил Ангел Комнин;
Аргосом,
Коринфом,
Фивами завладел Лев Сгур. В Малой Азии возникли два сравнительно крупных государства —
Трапезунтская империя, где утвердилось потомство императора
Андроника Комнина, и
Никейская империя, где утвердился зять императора
Алексея III,
Феодор II Ласкарис. На севере у Латинской империи был грозный сосед в лице болгарского царя
Калояна. Оба Алексея отступили перед натиском
Балдуина, но ему пришлось столкнуться с Бонифацием, поддержанным греками.