Лучше конечно сводить мужа к психологу, потому что, это не здоровая тема, но он не согласиться, скорее всего.
Попробуйте молчать, когда замечаете, что он молчит, не обращайте на это внимание, сходите в магазин за мороженкой, а он пусть гадает где вы шляетесь, но если он и на это обидеться и попытается вам что-то предъявить, то ему будет нечего, аргументов у него никаких)