Дети от прошлого брака мужа

Здравствуйте , хотелось бы прочитать мнение по поводу моей ситуации в жизни. Муж развелся с женой до знакомства со мной , она изменила ему и живет с другим мужчиной и детьми на съемной квартире , когда мы познакомились я знала что у него есть дети (2 дочки( 6 и 8) и мальчик, ему не родной, но воспитывал с раннего детства, сейчас ему 12) у меня детей нет . Так получилось что полюбила , хотя всегда была мнения что если мужчина с детьми, да никогда в жизни ! И не понимала почему девушки жалуются если сами выбирают таких мужчин …. а тут трое … пол года брали каждые выходные , я работаю 5 дней , и получалось так что выходные не выходные…. Посуда , готовка, уборка , крики визги …поговорили с мужем , он меня понял и стали брать через выходные. Алименты платит и не маленькие на 2 детей. Берем троих детей . Поженились , взяли ипотеку , теперь предлагает забрать себе одну дочку …. она плачет, хочет с ним жить …мне тоже жалко что так произошло в ее жизни , но я не «Мать Тереза» чтобы тратить свою жизнь на воспитание не родного мне ребенка при ее живой матери. Хочу после того как построят дом, планировать рождение ребенка , но эта ситуация меня выбила из колии… боюсь если у него уже такие мысли , рано или поздно он заберет, дочка скажет что сожитель мамин ударил, или еще что… очень манипулировать умеет. Как действовать чтобы сохранить наши отношения?