Как вы вошли в отношения, какие были его исходные данные?
Если он живёт в своем жилье, работает на устраивающей его работе, возможно у него есть авто, он не бытовой инвалид, а в ваших отношениях единственная потребность, которую вы закрываете - секс, то он точно не боится вас потерять.
У него есть хоть какая-то причина "держаться" за вас, кроме секса ?