Ну и что? Если он не хочет, вы его с собой позвали, он отказался, что мешает тогда пойти, куда вам хотелось, без него? С мамой, с сестрой, друзьями?
Вы же не просто усвистали развлекаться, проигнорировав мужа, а честно предложили. Он сам не захотел, но это не повод менять ваши планы.