Общение с бывшим

Дамы. Совет нужен.
Встречалась я на протяжении двух лет с разведённым мужчиной, у него сын 3х лет. (Развод до знакомоства со мной).
Бывшая супруга все время пыталась его вернуть, не давала видется с ребёнком без ее присутствия, его родителям не показывала внука. Мальчишка растет в женском обществе, МЧ стал психовать что воспитывают сына мямлей и тп. На что БЖ заявила и поставила условие, что если он хочет чтоб сын вырос нормальным мужчиной, и если он вообще хочет с ним видится - они должны быть вместе. Маразм, но так.
МЧ предложил мне - живет он с ними, но хочет тайно встречаться со мной, "мол, люблю то я тебя".
Естественно с таким вариантом он был послан, пусть живет с бж и сыном, я понимаю, что ребёнок должен быть на первом месте, но и любовницей быть не собираюсь, хоть и испытываю сильные чувства к нему.
Теперь он пишет и звонит мне каждый день, чтоб хотя бы просто общаться. Что делать то? Общение с ним мне дорого, но и гордость есть и самолюбие уязвленное.