Разводиться ли? Помогите советом!

Замуж я вышла в 20 лет ещё училась в институте, через год у нас родилась дочь(я училась на 5 курсе) После универа сразу вышла на работу. И через полгода на работе завязались отношения с мужчиной. Сначала просто общались(все как всегда), а потом я поняла, что не могу просто ложиться к мужу в постель, что не люблю его уже. Вообщем рассказала ему все, он уходил, приходил, спрашивал не передумала ли я. Но я и не думала тогда, была поглощена(как мне казалось)самой большой любовью в своей жизни! Мы развелись. И стали встречаться активно с тем мужчиной. Через год он сделал мне предложение. Мы стали готовиться к свадьбе. НО...была против его мама(он не был женат и у него нет детей). Вообщем не знаю, что произошло, но он сказал, что нам надо расстаться уже тогда, когда были куплены обручальные кольца. Как я это все переживала не могу описать, неделю пролежала в больнице под капельницами. Изменить всю свою жизнь и жизнь своего ребенка ради человека, который тебя бросил по неизвестным причинам! Вообщем прошло и через год я встретила его-на данный момент своего второго мужа. Он работал, был из приличной семьи и самое главное хорошо относился к моей дочке. Я вышла за него. А через месяц он уволился с работы. Уже больше года я надеюсь что что то изменится, но все стоит на месте. Он не работает, оскорбляет меня, ничего не делает по дому. Единственное-он хорошо общается с моим ребенком и она его обожает и другого отца не представляет для себя. Думаю о разводе, не могу так больше, НО...это второй раз и город у нас маленький.. и дочка привыкла...Не знаю, помогите советом, подскажите что то... как бы поступили вы!??? Спасибо.