Отношения с проблемным мужчиной

Познакомилась примерно полгода назад с мужчиной на СЗ. Мы среднего возраста, с уже взрослыми детьми. Вроде внешне понравился, по общению тоже, абсолютно мой человек, много общих тем. Нам по 46 лет. Когда знакомилась, лично у меня были планы просто хорошо проводить вместе время: секс, театр, на концерт сходить, книги и фильмы пообсуждать. Без быта и замужа. Мужчина сразу начал намекать, что ему нужна семья и вместе жить. Я сказала, что оно мне не надо, хотя он мне понравился, более адекватного мужчины в отношениях у меня не было. Он обиделся, конечно, но сказал, что примет как есть, так как влюбился и хочет со мной продолжать отношения. Первые 3-4 месяца все было хорошо, флер влюблённости,наверное. Постепенно в процессе общения выяснилось, что у него большие проблемы со здоровьем, финансами и за ним бегают приставы с целью описать имущество, в том числе недвижимое. Прогулки с сексом свелись к минимуму. Я не хочу его. Обсуждение его болячек и финансовых проблем - к максимуму. Я свои проблемы, к слову решаю сама. Ну и его решаю, вроде как в отношениях люди должны поддерживать же друг друга. За что он регулярно говорит, что я его ангел хранитель и типа куда ж он без меня. Пропадëть. Но это начинает бесить. Влюбленность моя, как чувствую,начинает в какое-то чувство гнева перерождаться. Он меня раздражает последнее время. Хотя он ни в чем не виноват, получается. Я понимаю, что надо валить по уму и ничего хорошего не будет дальше. Но у меня чувство вины. Как же брошу человека в сложной ситуации, а вдруг он с собой что-то сделает, типа заболел, да еще и все бросили. Но. Он свои проблемы наживал при бывшей жене. С ней бухал, брал кредиты, лежал в больнице при смерти из-за того, что вовремя не обратился к врачу. Почему я последствия этого всего должна разруливать? Но чувство вины меня все гложет... Помогите мне, вставьте мозги на место, пожалуйста. Что делать?