Почему любовник боится что я к нему привыкну?

Здравствуйте!Девушки помогите,нужен совет,так сказать мнение со стороны!Просьба к тем кто хочет обидеть или написать какую то мерзость,не беспокойте своими комментариями!
Я познакомилась с одним мужчиной несколько лет назад!он мне сразу понравился,но я ему не могла признаться в своей симпатии,потому что он был женат!но брак его длился не долго,они растались с женой!гдето через месяц после этого я ему призналась в своих чувствах,и как оказалось симпатия была взаимной!сейчас у него есть девушка,с которой он недавно начал жить вместе!но они очень часто ссорятся!она уже не раз его бросала,но в итоге возвращалась!когда его друзья спрашивают почему он с ней,он говорит что просто привык!хотя очень устал от повседневных ссор!
После того как я призналась ему в своей симпатии мы начали встречаться в роли любовников!поначалу встречи были редкими раз в несколько месяцев,потом чаще,раз в месяц гдето!я поняла что он просто ничего ко мне не чувствует и поэтому мы так редко видимся!подруга посоветовала с ним поговорить о том чувствует ли он чтото ко мне,потому что она видела как он смотрит на меня и говорит что не все так просто!и вот я решилась на разговор!когда спросила о чувствах,он ответил что чувствует симпатию и надеется что взаимную!а вот когда спросила почему же тогда так редко видимся,он ответил,что боится что я к нему привыкну!!!я обяснила что я о таком и не думала,потому что понимаю что зачем я ему с чужим ребенком!он не сказал ничего,лишь то,что у меня очень прекрасный ребенок,и о такой дочке надо лишь мечтать!тогда в чем проблема?он говорит что думает обо мне и скучает!но тогда что не так?может он боится что у меня есть муж(гражданский и он его хороший знакомый),потому что он говорил что и не говорил мне раньше о своих чувствах,не хотел рушить семью!насчет мужа,чтобы вы меня не осуждали,живем ради ребенка!