Вы правильно поступили. Отлично, что Вы поняли, чего Вы хотите - человека рядом, секса, тепла и живого общения.
Он Вас держит и не держит, потому что он не хочет, чтобы Вы находили себе другого мужчину, но понимает, что не может дать Вам то, что Вам нужно. Если Вы с ним останетесь, и согласитесь на эти виртуальные отношения, Вы будете несчастны. И ради чего?