как избавиться от влияния родственников?

расскажу все по порядку. мы с мужем женаты 5 ,5 лет. детей пока что нет, так как не хотим, да и вообще с таким отношением страшно заводить ребенка, тк у мужа его мать и его родственники стоят на первом месте.
расскажу последнюю историю. он пошел в отпуск в ноябре 2016 года и вместо того, что бы провести время вместе со мной он собрался и поехал в деревню к своему брату, а оттуда в деревню к матери. Т.***** весь его отпуск мы провели не вместе.
и с собой он меня не зовет.
и еще меня очень сильно беспокоит тот факт, что он не умеет расставлять приоритеты.
когда ему было 16 лет , мать заставила его отказаться от его родного отца, она заставила его сменить фамилию отца на ее. и сделал она это методом манипуляции. говорила что , мол кто тебя воспитывал, кто тебе покупал еду, воду, кого ты больше любишь. в итоге он сменил фамилию и с отцом практически не общается.
хотя в том, что не сложились отношения у его матери и его отца , виновата именно она , так как она крайне не ухоженная женщина и любит,очень любит выпить, а отце был моряком и видел лучшую жизнь, лучших женщин, но это лично мое мнение.
а еще она говорила, по началу нашей семейной жизни, что он(мой муж) все равно в милиции не будет работать (он сотрудник), что он приедет в деревню и сядет на трактор.Я этим была вообще поражена, т.к любая мать хочет , что бы ее ребенок добился успеха в жизни. А я всегда говорю мужу , что нужно стараться, нужно добиваться успеха, т.***** ободряю его , но это не в ключе упрека, а наоборот в позитивном . Так за это время он получил высшее образование по специальности и его перевели в уголовный розыск.
Но я боюсь что из за влияния его семьи(матери, братьев двоюродных и т.д) они все испортят, потому что у них одни неудачники в семье.два брата двоюродных авто слесаря у которых ни образования , ни кола ни двора, как говориться. хочу что бы они меньше общались, потому что как говориться с кем поведешься от того и наберешься… посоветуйте что мне делать?!