Отношения с начальником ухудшились

Мне 23 года, работаю в коллективе где конечно же есть мужчины, любящие пофлиртовать, построить глазки и тд. Ну так вот, один пошел ва банк, и спустя какие-то месяцы после моего трудоустройства, стал приглашать посидеть в кальянной после работы, делал он это редко и не навязывающе. Он начальник из соседней отдела ему 29. В целом общалась, рассматривала, так как свободна и подумала бы почему и нет. Спустя пары таких встреч, стали не понимать друг друга. Конфликты на пустом месте, характером тяжелый, по итогу перестали общаться на месяц. Заобщались заново, поцелуи , обнимашки, подошли к разговорам об отношениях, и все бы Казалось норм. Но многие факторы смутили, рассказывал что в отношениях изменял, якобы по глупости. Цветов не дарит. Говорит, что не будет открывать полноценно душу, чтобы туда опять не плюнули. Из-за этого между нами какая то дистанция, я не могу полноценно открыться ему, а он в целом не хочет. Будто ждет и проверяет, что я смогу ему дать и расположить его к себе. Говорила не раз, что мне недостаточно заботы, уважения, романтики, открытости перед друг другом. Он говорит, что я мусолю одно и тоже и что все нормально. Я ссылаюсь только на то, что у него были неудачные опыты (хотя у кого их не было). Мы не спали, ночевала у него один раз. Склонял к этому, но я внутри понимаю что пока я не уверенна в человеке, ничего не будет. А каждые наши обсуждения, он присекает, говорит что я предьявляю, злится. Что делать? Ждать? Взрослых мужчин у меня не было. Или заканчивать?