Не хочу ночевать у родителей мужа

Встречаюсь с мужчиной три года почти. Мне 37 ему 39. В общем хорошо живем, сделал предложение, планируем пожениться. Но вот есть проблема для меня. Он очень привязан к родителям, которые живут в 1,5 часах езды от нашего города. Часто ездит к ним и хочет чтобы я его сопровождала на всех мероприятиях. Летом они живут на даче и мой ездит к ним с ночёвкой и я тоже должна ездить по его мнению. На даче нет отдельных комнат- все смежные переходят одна в другую или внизу гостиная с диваном, условно отделённая кухонной панелью. В общем я со скрипом и после уговора его родителей два раза оставалась там с ночёвкой - ужасно уставала, после этого была без сил пару дней. Мне очень некомфортно постоянно быть навиду, поддерживать разговор с его родителями родственниками, племянниками. Да даже в туалет сходить в напряг. Сейчас зима, родители живут в однушке. Недавно мой милый поехал к ним в гости и в процессе беседы сказал что я тоже должна поехать. Я сказала что если без ночёвки то поеду, если с ночёвкой то езжай сам. Он ничего не сказал, но через месяц припомнил мне эту ситуацию обвинил что я его одного бросаю и он на всех семейных мероприятиях один. Поругались из за этого. Я в шоке конечно. Очень обидно с одной стороны, с другой чувствую себя виноватой что вроде как оказываюсь от общения с его роднёй, которые ничего плохого мне не сделали , прекрасные люди доброжелательные. Его я никогда не ограничиваю в общении с родителями - всегда говорю конечно езжай, с ночёвкой. Теперь я прихожу в ужас от мысли что близится тот момент когда он снова скажет поехали к моим родителям и снова встанет вопрос о ночевке в однокомнатной квартире на соседних диванах. мои объяснения что мне некомфортно он не понимает - говорит ну что такого ? Мы же с тобой вместе и ездить к родителям должны вместе. 
Мою маму он видел один раз за 3 года, она живет в другом городе.