Как правильно отказать в сексе мужчине, чтобы не испортились отношения?

Мне на работе очень симпатичен один мужчина ( мой начальник). Это взаимно. У нас с ним пока такой легкий флирт, еле очевидный.. Намеки/полунамеки...Не знаю, как объяснить. Он разведен. Я замужем, но очень близка сейчас к разводу ( это другая история, он об этом не знает). Сегодня на совещании он сказал, что в пятницу улетает в командировку на 5 дней и я буду его сопровождать! Я до сих пор в шоке, но не об этом. Он сегодня весь день шутит по поводу командировки, что он меня наконец накормит нормально ( я мало ем)), что покажет свои любимые места, что номера у нас будут рядом, спрашивает, не сильно ли я храплю...тд. А мне не до шуток... Дело в том, что я с ним хочу именно серьезных отношений. Хочу сейчас разобраться с мужем и ему намекнуть, что свободна.. Конкретно проблема: я не смогу в эту командировку заняться с ним сексом. Не могу и не хочу. Дай Бог, если ситуация не сложится к близким отношениям, а если сложится?! Пожалуйста, научите, как избежать близости и не испортить отношения?? Я прямо в панике какой- то...
В идеале для меня: хорошо провести с ним время, понравиться ему еще больше, заложить фундамент будущих серьезных и долгих отношений!!
Редко обращаюсь за помощью к форуму, но ситуация просто жизненно важная для меня!!