"не хочу навязываться"

Манипулирование какое то. Оставьте его в покое, не отвечайте и не парьтесь, его проблемы, что он имел ввиду.

А этот человек вам интересен, нужен?
Если нужен, то тогда просто скажите, что его общение вы не считаете навязчивым и рады общаться с ним.
Ведь иногда бывает, что такая фраза звучит от неуверенности в себе, замкнутости...

Когда другой не отвечает взаимностью. Разве не понятно?

Может быть вы переиграли в недоступность и холодность.
Разверните тему. А то так и будем гадать.