Измена двухлетней давности

Узнала об измене мужа спустя два года.
Ситуация такая: мы с партнером всегда были в сложных отношениях из-за его семьи.
Пару лет назад, когда мы жили вместе, начался сложный период (он не хотел жить вне брака, так как это грех и его родственники были против). Пропадал на работе, отмалчивался и тут же был со мной мягок.
В какой-то момент мы решили разъехаться, но быть вместе, поэтому я уехала к родителям в другой город. За месяц мы успели разойтись и сойтись снова, так как поняли, что любим друг друга. И вот, роспись, беременность и рождение ребенка. Все вроде хорошо, но что-то не давало покоя с тех лет. Я по глупости залезла в его старый телефон и узнала, что в период, когда мы были вместе и я ещё жила с ним, он начал встречаться с другой. Он приводил ее в наш дом. Он был с ней, пока я на пару дней уезжала к родителям. Познакомил ее со своей семьей, врал мне, что у них ничего не было.
Я решила рассказать ему, что все знаю, но теперь он молчит, обиделся на то, что я лезла в его телефон и искала не пойми что.
Не знаю, что делать и как себя вести. Вроде люблю, да и до брака все было, но это не дает мне покоя.