Стоит ли делать, как он сказал

Здравствуйте! У меня дурацкая ситуация. Хочу встречаться с моим молодым человеком чаще, чем получается сейчас. А он подсел на онлайн игру и постоянно играет. Когда в очередной раз я начала втолковывать ему, что мне обидно, хочу чаще его внимания, он ответил: "в чем проблема? У тебя есть ключи от моей квартиры, приехала бы давно!" Мне кажется, что это как-то неправильно, ехать к парню без приглашения. А как вы думаете? Встречаемся 10 месяцев