Расставаться ли с любовником?

Девушки помогите найти выход из ситуациии.Началось банально, продолжается тоже так же.Я его люблю, он видимо тоже(но не признается).При случае напоминает что семью не бросит, будет жить как сосед, но не уйдет! - такое чувство будто сам себе говорит и ему так легче.Женат 5 лет, сыну 4,5 года, очень его любит.Встречаемся с ним меньше полугода, уводить не хочу - хорошего из этого ничего не выйдет, но и продолжать встречаться.... Я свободная девушка, сама себя обеспечиваю, но ребенка и семью свою тоже уже хочется(мне 27).Подскажите как быть? пытались расстаться - не получается, обоим х....во.