Мне не приятно что он водит их к нам.

Здравствуйте!
Не совсем понятно, Вы кого хотите выгнать? Брата мужа или ***
Если терпеть не хочется, попробуйте решить проблему, для начала можно обсудить это со своим мужем, что он думает об этом, потом необходимо поговорить с братом мужа и озвучить правила его проживания на Вашей террории.
Тут также стоит учесть важный момент, он гость и проживает согласно Вашим правилам, или у него есть его комната, за которую он платит и тем самым обеспечивает себе право приглашать к себе кого-то.
И совсем не понятно, как прояснение и обозначение правил совместного проживания 3 взрослых людей, повлияют на Ваши отношения с родителями мужа.
Для того, чтобы решить этот вопрос, нужно начинать с разговора с тем, кто проживает на этой территории.
Так или иначе, выбор остаётся за Вами.
Успехов Вам.