Личная жизнь с мужчиной, когда есть маленький ребёнок

Здравствуйте. Встречаемся с М год, свой бизнес, весь в работе тк копит на дом. У меня маленькая дочь 3 года. Живем с родителями, оставляю иногда дочь бабушке с дедушкой чтобы встретиться с М, втроём тоже бываем, но реже, тк мой М часто освобождается поздно вечером. Жить вместе пока не планирует из-за своей занятости, говорит предыдущий брак разварился как раз из-за того, что его в основном дома не было, как только купит дом хочет перенести бизнес туда и тогда жить нам вместе. Родители считают нам пора съехаться, из-за этого жуткие конфликты, к тому же я уже не хочу оставлять дочку на бабушку с дедушкой. Подскажите как быть! Грязь и грубости мимо