Мужчина и две женщины

Встречаюсь с мужчиной 2 года, мне 35, ему 44. На момент нашего знакомства он был один, вернее только что расстался с девушкой, с которой жил около 8 лет.
Всё было вроде бы не плохо, но еще тогда я заметила, что когда мы бываем в людных местах, он смотрит по сторонам, оборачивается, возможно даже боится, что его кто-то увидит со мной. И так было постоянно, поэтому в своём городе мы почти не гуляли.
И вот произошла первая ссора и он пропал. На контакт со мной не шёл. Появился спустя 3 месяца, сказал, что любит меня и решил начать всё сначала. А я так его любила до безумия, что и ссоры все забылись. Через некоторое время в соцсети я увидела его совместное фото с бывшей. Он признался, что вернул её и живет с ней.
Я много раз хотела порвать эти отношения, но он снова возвращает меня. Для чего мужчине сразу 2 женщины? Ну если он вернул бывшую, значит любит её, а не меня. Хотелось бы услышать мнение мужчин. Может быть здесь мне наконец то вправят мозги...