Ехать без него?

Вопрос, наверное, супер глупый, но нужно с кем-то обсудить. Около года нахожусь в отношениях с мужчиной. Вместе не живем, но встречаемся часто, проводим вместе выходные, отпуска и т.п. Нынешний ухажер практически за любой кипеш, мы все время куда-то ходим, ездим, он часто инициатор и организатор, интересный попутчик, платит всегда он... До него 5 лет была одна, а еще до много лет замужем за патологическим домоседом, поэтому всю жизнь развлекала себя сама и в общем-то сама с собой прекрасно провожу время, мне не скучно и нравится.
И вот ситуация. Давно хотела съездить в некий город, в такую поездку выходного дня. Туда от нас можно добраться на прямом ночном поезде около 11 часов, самолеты туда не летают. В принципе удобно, два полных дня на месте, возвращение в понедельник утром. Он работает удаленно, т.е. в офис не надо. Я предложила поехать. Мужчина сначала вроде загорелся, а потом сдулся - ночные поездки по ж/д переносит плохо, не спит и будет разбитым, два выходных даже в таком прекрасном месте дескать того не стоят. Если ехать, то на неделю и географию побольше захватить, но это может быть когда-нибудь потом, при случае...
Я без претензий вообще - все мы разные, и мучить человека совершенно не входит в мои планы. Однако, когда я заикнулась о том, что я съезжу сама, он... ну напрягся что ли. Нет, никаких демонстративных обид и ничего подобного, но явно ему это было неприятно. И я почувствовала себя неуютно - в последний год мы практически всюду вместе и он очень старается, чтобы мне (нам) было хорошо. С другой стороны - он мне не муж и даже не жених, правильно ли с моей стороны подстраиваться под его "не могу" и отказываться от своих "хочу"? И в этой ситуации и в принципе в будущем в похожих. Если бы речь шла, например, о времени, т.е. отложить/перенести - не вопрос, конечно. Однако когда речь идет о таких вот кейсах, где определенный формат досуга ему по любым причинам не подходит - как быть?