Автор, идите заниматься. Да, так произошло, что штаны треснули. Такое бывает. Конечно, это не приятно.
Но вы ходите в зал для себя чтобы привести тело в форму. Это ваше здоровье.
Хотите сделайте небольшой перерыв , и занимайтесь. Просто одежду для занятий подбирайте удобную.

Очень похоже на психологический вампиризм вашего мужа. Если он постоянно пытается вас вывести на чувство вины и показать что обиделся, явно вампирит.
Мой совет стараться не реагировать, либо заняться своими делами. Не пытаться как-то взаимодействовать с ним.
Пусть сам повариться в своём негативе. Можно даже отстраняться как физически, так и эмоционально (он ждёт эмоций, этим и питается)
Если есть другая комната уйти туда и заняться чем-то интересным для себя. Или гулять(лисно я так делаю, ухожу на природу гулять. Природа хорошо гармонизирует эмоциональное состояние).
Дать своими действиями понять ему, что подпитки не будет