Может потому и не женился, что любил твою маму. Не так-то просто мужчине, который жил холостяцкой жизнью, взять и в раз все изменить. Все свои привычки, быт, да еще и ответственность за детей на себя взять.
Если у тебя есть возможность сходить к психологу - иди обязательно. Не слушай тут советов, потому что каждый человек со своей колокольни судит. Люди ляпнут что-то, не подумав и не зная твоей ситуации полностью, ты себя накрутишь потом и у тебя же будут проблемы.