Муж не хочет

чтобы сын жил с нами. Здравствуйте,уважаемые.Подскажите как быть. Муж в связи с долгами живет со своей матерью,а я со своей. Сдаем квартиру,чтобы справится с долгами Скоро переезжаем в с. вою с мужем квартиру.У меня есть сын,который живет с бабушкой. Я хочу жить иногда с сыном и с мамой,а муж говорит,что будешь приходить и навещать сына,он уже не маленький.Но приходить и жить со мной каждый день. Я говорю,что я еще не вырастила и не выучила сына,чтобы его бросить. Муж не хочет,чтобы сын жил с нами. Он нормально к нему относится,но чтобы только жил не с нами.Как быть?