уехал с бывшей женой и детьми на отдых

Собираются наладить отношения. Вы - запасной вариант, если не срастется. Если бы со мной так поступили, послала бы однозначно. Сразу же, по телефону и заблокировала.

Автор тут все очень просто на самом деле. Он живет и поступает как хочет, потому что он мужчина. Вы можете это принять или попробовать поскандалить, вас просто пошлют и правильно сделают. Он не хочет терять свою свободу живя у себя, не хочет терять общение с детьми, и к вам относится хорошо. У вас никто разрешения спрашивать не должен, он вам не ваш ребенок ))

Вы знакомы с его детьми? Какие отношения?

Несостыковки. Дети взрослые уже. Спокойно могли бы с отцом поехать, но отношения с женой настолько плохие, что с ним она не отпустит. При этом отношения достаточно хорошие, чтобы ехать всем вместе. Как так?
Похоже, шантажом тетенька добилась совместной поездки. Какая ее цель? Отдохнуть нахаляву? За чей счет поездка?
Желание вернуть мужа? Вполне возможно.
Секс тете захотелось с проверенным мужиком?
Ну и еще один из реальных вариантов - лапшичку с ушей снимаем, автор. Все со слов мужчины - и про шантаж (либо вместе, либо дети не едут. Правда мать такое может желать своим детям при хорошем отце?), и про нежелание вернуться к ней, и про то, что она одна не справится со взрослыми детьми (правда что ли?).
Ну и вишенка на торте - а кто вы в этой семейке? Вас в известность ставят по телефону!!! Мужчина, с которым вы в серьезных (????) отношениях с вами никак не считается, не ищет компромисс с бж устраивающий всех, не пытается договориться с вами. Просит понять и простить и подождать, пока он со своей семьей развлекается.