Стоит ли уходить от мужа, если ему не нужна семья?

Девочки, помоги. Я честно, уже запуталась.
Мне 26, есть годовалый ребенок. Уже почти 4 года живу с мужчиной, старше себя на 10 лет. Год нахожусь в декрете.
Устала бороться с мужем, хочу уйти, но не понимаю правильное ли это решение.
Он работает, оплачивает квартиру и на этом все. Злоупотребляет алкоголем, почти каждый вечер и не видит в этом не чего плохого, даже несмотря на то, что в основном все ссоры возникают на этой почве. Можем не разговаривать неделями, живем в разных комнатах, каждый сам по себе.
Денег не дает, живу с ребенком на пособия, которых еле хватает. Лишний раз даже копейки не даст на дочь, я уж не говорю про себя.
Для него на первом месте то, что хочет он. Пьет, ходит на рыбалку, дома не помогает, с ребенком может посидеть от силы минут 20 в неделю, очень редко когда больше.
Боролась 2 года, теперь надоело. Хочу уйти и забыть это все как страшный сон. Не хочу чтоб ребенок видел его попойки и ежедневные скандалы.
У мужа вечные проблемы с финансами, он алименщик (платит через раз 3 копейки, приставы уже как к себе домой ходят) долгов много. Заложил все мое золото в ломбард...
Поделитесь советом, как бы вы поступили в этой ситуации?
Понимаю что так продолжаться больше не может, человеку не нужна семья, ему важнее пьянки и рыбалка. Но что-то внутри меня останавливает от того чтоб собраться и уйти. Не хочу тратить свое время на этого человека, да и не люблю его уже...