Вообще абсолютно нездоровая ситуация, когда один участник отношений считает, что он вправе решать, как жить второму. Каждый из вас полноценная личность, которая при построении отношений не лишается ни своего Я, ни права общения с другими людьми.
Поговорите с ним, но если его позиция непоколебима, то действительно бегите, дальше будет хуже. Уважайте себя, Вы имеете право и на личные интересы и элементарное общение с людьми разного пола.