Это не может быть основано на пустом месте.
Если он так думает, значит есть какие-то серьезные причины так думать.
Вам нужно встретиться и поговорить, не по телефону и мессенджерам, иначе вы его потеряете, уверяю.
Если вы дорожите этим человеком, необходимо объяснить, убедить, отношения это тяжёлый труд каждый день, увы это так.
Мы разные, у каждого свои привычки и т.д.
Желаю вам счастья.