Вы все правильно сделали. Муж, очевидно, не может выстроить границы с сестрами и их детьми, это не значит, что вы должны забить на свои. Постарайтесь не выходить с мужем в конфликт, но нормально объяснить, что вы не против племянников, но либо они соблюдают правила вашего дома, либо пусть встречи проходят на нейтральной территории, он не может ходить к ним домой общаться?