Муж и квартира

Всем привет! Рассудите по справедливости и по закону (может кто то был в подобной ситуации?). В браке 7 лет. Есть две дочери двойняшки. У меня маленькая квартира, но своя. Досталась в наследство от родителей до замужества. У него абсолютно ничего. Я доверчивая, и после свадьбы его родственники стали давить на то чтоб он зарегистрировался у меня, так мама его не может зарегистрировать, а тетя не хочет чтобы он оставался зарегистрированным у нее, и поэтому я его зарегистрировала у себя, все таки муж. Когда дети был маленькие, во время ссоры муж сказал "Ты хочешь вместо двухкомнатной
однокомнатную квартиру?" То есть он имел ввиду что если я с ним надумаю развестись, то он подаст на раздел моего имущества. Вскоре та ссора забылась, но вот эти слова я не могу забыть, прожили несколько лет дружно, дальше его измена, отношения испортились, и когда я его пытаюсь выставить из своей собственной квартиры, он заявляет что он проживал здесь несколько лет и в связи с этим имеет право на пол квартиры. Я хочу снять его с регистрации, но боюсь. Ему негде зарегистрироваться, да и развестись я сейчас не могу, надо детей дотянуть до самостоятельного возраста, так как мне приходится много работать, и муж иногда сидит с детьми. В квартиру он не вкладывается, ремонт не делает, но содержал меня с детьми во время декрета. То есть коммунальные оплачивались с его зарплаты. Сможет ли он что то у меня отсудить, если останется и дальше у меня проживать?