Живём в гражданском браке 2ой год

Девочки здравствуйте. Мы с молодым человеком живем 2ой год уже,у нас двое деток,но они у меня от первого мужа,а с нынешним молодым человеком мы вместе их воспитываем. Но в последнее время я стала замечать ,что эта семейная жизнь и воспитание детей как будто ему в тягость стала,совсем перестал уделять внимание деткам ,когда приходит домой даже не поздоровается не подойдет с детьми, ссоримся часто в последнее время и обычно причиной конфликта является его частое отсутствие дома,то есть для него на первом плане его друзья а не семья и он сам мне об этом говорил, ну не прямым текстом конечно..ежедневно он ходит к друзьям помогает в строительстве дома, я конечно никогда не была против этого,я все понимаю, но я все же считаю ,что со мной тоже нужно советоваться о моих планах и где-то и по дому помочь,уделить внимание мне и детям. Очень грубым стал,в ссоре очень много неприятных вещей говорит вроде того, что ему вообще пофиг на меня и моё мнение и говорит что меня не должно волновать куда он ходит,оскорбляет всячески..вот как тут быть((я с одной стороны и не жена ему законная а с другой стороны раз взял меня с двумя детьми и называет нас семьей то почему так себя ведет...