Терпеть или уйти?

Добрый день.Мне 34 года,есть сын и я давно была в разводе. С бывшим мужем мы разошлись и 4 года с ребенком жили вдвоём. Мне всегда хотелось иметь семью. С мужчинами проблем небыло,но как-то всё не то,а может и не сильно хотелось,я однолюб и долго привыкаю к людям,да и развод нужно было пережить,забыть,встать на ноги. Потом я познакомилась с мужчиной,ему 38 лет было,он был на стадии развода..2- е детей,делёжка имущеста и суды с бывшей женой...Я сразу поняла какой это геморой,и дело не в детях и алиментах,а в том,что человек не может так быстро из одних отношений перейти в другие,знаю по себе. И все же стали общаться,честно я полюбила этого человека,мне понравилось что он любит своих детей,общается с ними,покупает подарки и т.д. Я подумала,может и ничего страшного,дети это хорошо,будем общаться все вместе,мой сын,его ребятишки. Стали жить в месте,живем почти 2 года,я беременна...И как-то не складывается у нас,не в быту и любви,а в том,что его жена шантажирует его общими детьми,он переживает и все эти склоки и раздоры несет в нашу семью. Все эти ругани,суды на протяжении 2х лет,его нервы,мои переживания за него.С сыном он встречается наедине,без нас, потому что не хочет портить ему психику ...хотя с ухажером матери он общается...кароче,ни о каких совместных поездках и делах речи быть не может,обстановка по теме их детей накаленная. Я хотела обычной жизни,могла бы принять и полюбить его детей,но...Вот я и думаю,может *** мне всё это не нужно? Или есть смысл подождать и все устаканется с годами? Кто был в такой ситуации..