Переезжать или нет?

Мы с мужем живём у моих родителей, у нас грудничок, и недавно начали думать о переезде. Не нам свободы, не им. То они к нам заходят в неподходящий момент, то мы к ним. Да и домашние дела не ладятся. Чувства семьи единой у нас нет. Мама с папой все хотят "помочь", но суют свой нос дальше, чем надо.

Мы подсмотрели варианты, которые нас устраивают. Когда родители мужа приехали в гости, то мы начали разговор. Моя мама сразу начала, мол, "Ребенок будет без присмотра", "Они спать постоянно будут". Родители мужа были только ЗА. Но разговор был умело переведен.
Мы поговорили с моим папой, он оказался не против. На следующей день мы опять начали разговор, с родителями мужа посмотрели варианты и когда они было собирались уезжать (муж повез их на станцию), я хотела поехать с ними и ребенком, проводить. Мама начала возмущаться, мол, "Холодно, ребенка угробите!". Хотя точно в такую же погоду мы ездили к педиатру и та сказала, что если лицо ребенка сильно не открывать, то все будет хорошо. Но для моей мамы это не аргумент.
В итоге мама мужа не выдержала и ещё раз предложила съехать.
Моя мама впала в истерику, слезы и крики "Мол, я вообще на съёмную не сунусь". Она испортила настроение всем. Родители мужа сказали, что больше не приедут, потому что им неприятна эта ситуация.
Желание съехать у меня пропало (хотя я и сама искала варианты), а у мужа наоборот подкрепилось. Особенно после того, как мама позвала бабушку с дедушкой на проф. беседу на следующий день. Мужу не нравится то, что ему приходится все время прятаться, чтобы поговорить со мной или со своими родителями, он хоть и живёт с нами год, но все ещё стесняется подходить к холодильнику. Мои родители ругаются, если он выходит ночью курить, мешая им спать.

В последнее время мы часто ссоримся на этой почве (шепетом в комнате).

Помогите! Что нам делать? Съезжать или нет? И как поговорить с мамой без истерик и т.д.?? Или может с мужем что не так?