У вас в голове каша. С одной стороны, вы понимаете, что его надо гнать. С другой стороны - не понимаете, как.
На вас маленький ребёнок, поэтому выгнать его технически, действительно, сложно. Квартира в собственности или снимаете? Если она у вас в собственности, то выгнать его вы имеете полное право, а все его "я тоже вкладывал" в пользу бедных. Но если он вас может подкараулить у входа и зайти с вами в квартиру насильно, а вас некому защитить - тогда не стоит торопиться с выгонянием.
Если он работает вахтами - есть способ поскорее отправить его на вахту?