Отношения с женатым... что теперь делать??

Не накидывайтесь только на меня. Начну с того что в моем подъезде жила девушка со своими родителями, потом она вышла замуж и переехала, родила ребенка. Но естественно приходила к своим родителям, с мужем. Так я его и увидела. Он очень симпатичный и интересный. Несколько раз столкнулись в подъзде, потом увидела его в магазине. Начала ему улыбаться, короче намекнула. Потом заговорила, ну и начали мы созваниваться, а потом уже отношения перешли в близкие. Ничего серьезного я не хотела, но он мне сильно понравился, можно сказать что раньше никто так не нравился. И секса у меня до него не было, вот я и подумала почему бы не с ним. Но уводить не хотела. И вот неделю назад он мне сообщил что ушел от жены, и хочет быть со мной. Я в шоке, т.к. семью разбивать не хотела, я, конечно, понимаю умом что не виновата, но все же не знаю что делать. Хотелось необременительных отношений, а теперь... Боюсь еще что семья соседей узнает все.