Начальник подкатывает ко мне?

Сегодня утром случайно встретилась в коридоре с нашим начальником, задал мне вопросы по работе (за несколько лет ни разу ко мне не подошёл, у меня есть мой непосредственный начальник, а этот по иерархии выше, и с простыми смертными не разговаривает). Потом попросил у меня номер телефона, еще с таким серьёзным лицом, что я ему продиктовала, мало ли - может что по работе надо. Он днем мне позвонил и предложил общаться иногда, только по телефону ничего больше, также сказал, что могу на чай забегать. Он старше меня на 25 лет, о чем нам с ним говорить! Я замужем, есть ребенок. Я не могу его резко отшить, от него зависит моя работа в хорошей, серьёзной организации. Я в замешательстве, не знаю, что теперь делать, как его отвергнуть, чтобы не обидеть.