С кем должен жить ребенок?

Прошу дать совет по такой ситуации.
У нас с мужем двое детей - сыну 6 лет и дочери 2,5 года.
В данный момент сложилась такая ситуация, что я не могу и не хочу дальше проживать с мужем совместно (вскрылась ситуация с его общением с некой дамой, хоть он и убеждает что это просто флирт, но есть подтверждение,что это не так...но речь не об этом).
Имеется квартира (его, ипотека) и дом, доставшийся мне по наследству (состояние среднее, но площадь большая и необходимые условия есть). Я решила переехать туда, на развод пока он просит не подавать, я ему уступила, 2 месяца жду, но для себя уже все решила. Проблема встала в том, что я вышла на работу, не дожидаясь 3 лет дочери, дети ходят в сад. У меня 5идневка, муж работает 1/3, и в итоге я попыталась с ним договориться,чтобы либо он 2 дня из своих выходных забирает/отводит детей и они ночуют у него, либо старший пусть остается жить у него в квартире, а я его буду брать на выходные. На меня ополчились вся родня, включая и его и моих, все стали орать, что я кукушка, как так ребенок будет жить без матери и.т.д. На предложение оставлять детей у себя хотя бы на 2 дня в неделю муж орет, что он с ними не справится, что это тяжело и ему никто из родни не поможет (на самом деле там куча сестер, бабушек, теток итд, которые все время нянькаются и живут рядом, могут погулять и.т.д).И в итоге получается,что он будет по 3 дня после одного рабочего отдыхать,как король, а я буду впахивать по 5 дней, носясь из садика на работу, и стоя вечерами у плиты, и выходные у меня тогда же, как в детском саду, и ни минуты отдыха и покоя не будет.