муж и ребенок от первого брака

Здравствуйте, помогите советом. Мы с мч встречаемся уже полтора года, знакомы 3 года.у меня есть ребенок от первого брака, ему 4,5 года. Мне 26, мч 28. Живем вместе, втроем. Но отношение у него к моему сыну как-то равнодушное. сын тянется к нему, а этот как бука. я ему объясняю, что это ребенок, будь ласковей. и ребенок часто ему говорит, что любит его. а он , я заметила, в ответ молчит. однажды спросила у него, любишь ли моего сына, он ответил, что нет. мне было очень горько слыщать это. говорит, что еще время не пришло. за эти полтора года он с нами никуда ни разу не сходил. он боится показываться на люди в нашем окружении. даже с сыном погулять не идет. а сын хочет этого. с бывшим мужем никаких отношений не пожжерживаем, да и он сам к этому не стремится. что делать? хотела уйти от него. мы как семья только в пределах квартиры. а за ней мы с сыном одиноки