Моё предположение, что примерно поэтому же он не хочет жить вместе. Он нервно чувствует, или даже ясно понимает, что при более плотном общении розовая романтика и восторг от эмиссий с фрикциями естественным образом поблекнут. Думаю, он бережёт эту призрачную сказку, не хочет её превращать в обыденность. Другое дело, что это запросто может не совпадать с Вашими вполне понятными желаниями. Правильно тут Вам пишут - общайтесь с ним с помощью самого прямого текста, тогда домыслы и фантазии будут Вас меньше грызть.