Родители против меня стоит ли продолжать отношения?

Я не знаю что мне делать,продолжать ли отношения или это все в пустую. Я люблю своего парня и отношения между нами хорошие, но его мама и сестра против и категорически запрещают со мной общаться. Начну с начала и объясню почему именно я им не нравлюсь. Дело в том что я была замужем и у меня двое детей. Мои родители умерли 5 и 3 года назад. Муж запил и я развелась и уехала к бабушке в маленький городок где жила в детстве. Устроилась на работу сняла квартиру и живу с детьми . на работе познакомилась с одним парнем и провстречались 8 месяцев потом он уехал по работе на другой конец страны и в итоге расстались с ним. потом начал ухаживать другой парень познакомил со своей семьей нас приняли мы повстречались всего месяц и он ушел к бывшей жене. и потом был еще один парень который тоже уехал по работе в другой город он был следователем. но так же не получилось отношений потому что общались только 2 месяца. и теперь мы встречаемся с Алексеем 1.5 года и его мама и сестра говорят ему что у меня было слишком много парней. и дело не в детях. В масштабах большого города это было бы вполне естественным но в нашем маленьком городке.... Сама по себе я человек семейный и все чего хочу это семью и мне не нужны мужики разные я бы еще с первым парнем осталась .И что теперь делать дальше я не знаю мы попробовали расстаться из за этой ситуации потому что жить вместе нам не дадут мы и суток не смогли друг без друга,сказал не хочет меня терять и будет пытаться разговаривать с родней. А я боюсь что не выдержу потом в будущем натиска его мамы и сестры или он станет их слушать и бросит меня. а я не хочу терять такие длительные отношения и люблю его и не хочу больше встречаться ни с кем лучше одна останусь. У кого нибудь есть что либо подобное помогите!!!!