Помогите муж ходит куда хочет а мне не разрешает

Здравствуйте. У нас с мужем такая ситуация - он может выйти куда хочет и когда хочет, как в принципе и я.. Но тут одно но! Я знаю (не в подробностях) где он бывает (не хотелось бы рассказывать подробности) и взамен я прошу чтоб он разрешил мне встретиться с другом (мужчиной) Это более чем честный обмен. Он говорит, что если я пойду с парнем, то он тоже пойдет с какой-то подругой и, даже намекает на измену.. но он уже ходит куда не надо.. я сто раз объячняла ему, что я женщина и я решаю друг это мне или большее... в ситуации же с ним я не думаю, что он откажется если девушка предложит нечто большее чем дружбу. Чувствую шантаж и несправедливость с его стороны.. не знаю как добиться справедливости