Сначала флиртует...а потом...

Здравствуйте, помогите разобраться, у меня на работе в смене есть мужчина, 33 года, не женат, но в отношениях, сама я замужем, ну и как-то раз с подругой шутили, я ему смеясь сказала, что он мне нравится, прямо жить без него не могу, на что он сказал, что я не свободна и он тоже, короче не понял он, что это шутка была, вроде посмеялись и ладно, с тех пор он начал приходить чаще ко мне в кабинет, "по работе", взгляды его тоже часто замечаю на себе. Коллектив у нас смешанный, но больше мужской, чем женский. Есть еще у него друг женатый, который пытался за мной приударить, но безуспешно, знаю, что это точно ими обсуждалось. В итоге мужчина этот мне теперь на самом деле нравится, а он то ищет повод для общения и весь такой милый и приятный, то наоборот, ведет себя агрессивно, пытается подколоть, задеть. И как это понимать?!