Квартиру бывшей жене с детьми

ситуация следующая - мужчина в браке разлюбил свою жену, но продолжал с ней жить ради двух детей. Жили спокойно в принципе, но все свое время он посвящал или работе до поздна, чтобы прокормить семью,или детям. С женой старался проводить как можно меньше времени. Потом получилось так, что полюбил другую женщину, из другого города. Поговорил с женой об этом, сказал что хочет уйти. Жена конечно в шоке, но что делать, после долгих разговоров смирилась. Они договорились, что он ей оставляет квартиру и будет их обеспечивать, чтобы не волновалась. С другой женщиной их разделяло расстояние и проблема прийти к такому материальному состоянию, чтобы жить на обе семьи. Быть любовницей еще другая женщина не соглашалась, так что любили на расстоянии. Встречались они раз, два в года, общаясь в остальное время по интернету. И через полтора года муж узнает, что его жена оказывается изменяет ему, причем с лучшим другом, с которым дружили со школы. Он в полнейшем шоке выгоняет жену из дома к тому другу. И решил квартиру ей не отдавать, т.к. посчитал что ее нечестность и подлость этого не заслуживают. Развелся с ней и живет с любимой женщиной в другом городе теперь, работу оба нашли. Квартиру сдает и с этого платит алименты бывшей. Живет сам в съемной квартире тоже. Она считает его подлецом за то, что не отдал им квартиру и что ей не платит денег на ее содержание. Сама работать не хочет. И детей настраивает против отца. Как считаете, должен ли он отдавать квартиру или нет?