Честно сказать, нафиг такого мужа. Если бы мой вот так по пустякам претензии вываливал, я бы была уже свободна и довольна одна. Это проявление неуважения к вам. Но если вариант с "Выпнуть нафиг из жизни" не рассматривается, то лучше поговорить, конечно. Прямо и настойчиво сказать "Мне очень неприятно, когда ты так говоришь. Я стараюсь как могу и хочу. Чего ты хотел добиться, когда говорил всё это?"