Он абсолютно прав. Раз Вы не являетесь его официальной женой, то Вы - подруга и сожительница. Вы - не жена.
Кстати, название "гражданская жена" и "гражданскийй брак" придумали только женщины, которым очень хочется замуж, а их не берут. Вот они и напустили тумана, чтобы никто не разобрался, законная она жена или фальшивая. У мужчин в лексиконе этих слов нет. Они так и скажут: моя подруга, моя женщина, живу я с одной...Женщина, которая не желает брака тоже никогда не назовет себя гражданской женой. Потому что брак , хоть законный, хоть липовый , ей нафиг не нужен.
Я сама сожительствовала. Но мне бы и в голову не пришло назвать бойфренда мужем. Тоже представляла его как "мой друг", "мой мужчина". "милый друг"...