Парень гуляет ночью со своими друзьями

Со своим парнем мы вместе уже три года. У него много друзей. С самого начала, как только мы начали встречаться с ним, он много времени проводил с друзьями. Мы с ним виделись раза 2 – 3 в неделю, а с друзьями он виделся чаще чем со мной, но стоило только позвонить его друзьям, он сразу же уходил к ним. Меня он никогда не звал с собой, объясняя это тем, что это не моя компания и у меня нет с ними общих интересов. С друзьями он встречался на улице (летом например, или когда уже тепло), или у кого- нибудь на квартире, обычно они вечером собирались и сидели до 2 – 3 ночи, а когда и до утра. Меня обижало что он ходит в эту компанию, а меня не зовет, а друзья его ведь со своими девушками приходят. Спустя два года он познакомил меня с друзьями, и предложил чтобы я ходила вместе с ним в его компанию ( я сама настаивала на этом знакомстве и на том чтобы он меня брал в эту компанию, а сам бы он этого никогда не сделал). В данное время он также встречается с друзьями, гуляет с ними до утра. Мне это очень не нравится. Ведь можно и днем встретиться же, или вечером после работы.
У меня и у него это первые отношения, относится он ко мне нормально, о чем не попрошу все делает, не жадный. Предлагает жить вместе, а у меня большие сомнения поэтому поводу, стоит ли мне с ним съежаться? Мне кажется, для него друзья важнее меня. Как вы думаете, как он ко мне относится? Стоит ли дальше с ним продолжать отношения?