вы не обязаны терпеть такое отношение к себе, ставьте себя на первое место. Поговорите с ним по душам, если Вам кажется, что человек "неисправен", то, конечно, разводитесь, к хорошему это не приведет, вы просто отбираете время друг у друга.