Большая разница в возрасте, стоит ли из-за этого забыть мужчину, который очень нравится?

У меня вот такая непростая ситуация.
Мне впервые понравился мужчина, такого чувства никогда не было. Знаю его около 10 месяцев, общаться чаще стали только вот недавно. Он был дважды в гражданском браке, у него двое детей. Дочке от первой жены уже 20 лет. Второй жене, платит алименты.
Серьёзные отношения, ему похоже не нужны. Он обжёгся, и не верит, что есть любовь.
Это какая-то визуализация: сначала, он мне очень нравился, и думала о нём постоянно, пыталась быть рядом всегда, пользовалась феромонами, чтобы притянуть к себе. Вот и притянула…. Он рядом, только я этому - не рада. Хотелось бы перемотать всё назад, и больше к нему не навязываться. Я не могу понять, чего он хочет от меня, если ему не нужны серьёзные отношения, и жениться на мне, он точно не собирается. Встречается с девушкой, (сам не знает, серьёзно у них это, или нет, говорит, что просто привязанность, что человеку, трудно быть одному и прочее), но и начал общаться со мной, и совсем, не по-дружески: заигрывает, мы говорим по телефону и видимся. Усугубляет ещё то, что мужчина меня старше на 19 лет….
Мама и родственники в шоке, ведь у меня отношений ни с кем не было, а тут раз, и появился - разведённый мужчина, с которым у меня большой разбег в возрасте, и ко всему прочему - он выпивает иногда. Считают его извращенцем, алкашом, монстром и прочим страшилищем (даже ни разу его не увидев при этом), а мне обидно за него, ведь я же сама начала это общение.
И ссориться с родственниками не хочу, и терять его…. Он хороший, добрый, умный, только вот непонятно, чего хочет от жизни…. остаться в старости в полном одиночестве…
Общаясь с ним, не могу понять, как он мне нравится, и почему. Я сама себе объяснить не могу эту симпатию. Ведь должно же быть, что-то общее… И характер у нас совсем разный: он - уверенный в себе, общительный, а я - стеснительная, да ещё эта разница в возрасте….
Он и сам мне сказал, что не знает, что мне может дать в жизни, и по-моему, боится такого общения, сам видит эту разницу в возрасте. Но в тоже время, когда я звоню ему - берёт трубку и едет на встречу, когда не ближний свет, в любое время.
В общем, всё сложно, а общаться с ним, мне хочется. Как быть? Большая разница в возрасте, стоит ли из-за этого забыть мужчину, который очень нравится? Забыть и не общаться, или всё-таки попробовать поговорить с ним и всё выяснить, только как, если родственники следят за каждым моим шагом? И как им доказать, что он не извращенец и не алкаш? И можно ли мне его исправить, если он не идеален?