То, в чём уверен Ваш муж в данном случае ничего не меняет. Все люди разные. Кто-то и когда лупят терпит (а то и гордится, что это её так "любят" сильно). Для меня подобные высказывания послужили бы поводом если вдруг не сразу развестись, то уж по крайней мере сразу сказать, что разведусь, если ещё хоть раз что-то подобное в свой адрес услышу. А со второго раза - развестись точно без возможностей переиграть. Да и просто мат если б в мой адрес с языка сорвался (вообще не важно в какой ситуации), и человек в течение получаса очень серьёзно не просил бы прощения - я бы ушла. Потому что это уже об отсутствии уважения, а если муж или жена супруга не уважает, это уже не семья.
Но это моя позиция. А Вам для себя - решать самой...