Не могу принять прошлое мужчины

Добрый день всем! Мне 24, ему 34. 10 лет он был женат, пока мы не встретились. Сначала просто подвозил с работы, просто по пути было. Много разговаривали общались, но ничего не было. Он женат, двое детей, я даже не задумывалась об этом. Потом как-то стали любовниками. На тот момент я рассталась с парнем, которого безумно любила и видимо в какой-то момент решила, что почему-то и не переспать с женатым. Никаких планов, никаких обязательств, не надо ничего объяснять. Так мы стали любовниками. Он бывал у меня каждый вечер до поздней ночи, а его жене было всё равно. Ей вообще было всё равно, ей нужно было только чтобы он по носил деньги, а где он, что с ним... Каждый вечер он пил, пил по многу, по сути спивался. В какой-то момент он просто пришел. Без вещей, с тем, что было в руках и больше не уходил. Дальше долгий развод, шантаж детьми, требование просто космических сумм денег с её стороны. Он оставил ей квартиру, машину, выплатил деньги лишь бы развод подписала без затягиваний. Мои родители были категорически против, доходило до просто невероятных скандалов, я даже о суициде задумывалась лишь бы всё закончилось. Тогда ещё и на работе начались проблемы. Всё это длилось около года. Сейчас мы живем вместе, мои родители его облажают, его родители меня тоже. Бывшая жена не лезет, но начнет как закончатся деньги, это точно. Проблема в том, что теперь я не знаю, а смогу ли я принять то, что он жил с другой женщиной, любил её, всё для нее делал. Что самые лучшие пеовые события как рождение детей, свадьба, произошли с ней. Я всегда буду второй, у меня не будет свадьбы (ему это не нужно) новые дети тоже я думаю счастья не вызовут такого как было с первыми. Я всегда буду второй. Плюс в будущем он начнет таскать своих детей к нам, а я этого уж точно не хочу. Не такое счастье я себе представляла. Как принять всё это? Я люблю его, но как жить дальше не представляю.