То ли сосед тревожный, то ли шумные мы

Живу в монолитном доме с двумя маленькими детьми досадичного возраста. Этажом ниже наш сосед... Он бегает к нам весь день в промежутке с 9 до 19 ч, пока отсыпается после ночных посиделок и таксования. Как итог, любой наш бытовой шум с 9 утра: речь, шум блендера, возюканье машинки по полу, его раздражают и мешают отдыхать. Сначала мы договорились, что уходим из жилой комнаты на кухню до 10 ч, чтобы сосед спал, потом мешать ему стали и звуки из другой комнаты, и кухни. Мы постелили шумоизолирующие ковры, но это тоже не помогает. Стали уходить гулять с 9 до 12 ч, тогда сосед стал приходить к нам в 12 и позже, т.к. мы, по возвращении ему опять мешаем: то дети игрой, то у меня стиралка работает и проч.приходит сосед сам раза два в день и отправляет дополнительно жену. Т.е. к нам визита 3-4 в день по поводу шума. В последний раз разговор со стороны соседа сопровождался угрозами применения физического насилия. Я уже в отчаянии и не знаю как быть. Правоохранительные органы помочь не могут, т.к. по выходу не могут зафиксировать нарушения не с моей, не с его стороны. Мы би и рады продать квартиру, сменив этаж или дом, но купили ее менее 2 лет назад, потому придется платить большой налог. Как найти управу на соседа, которому в дневное время мешает любой шум, даже минимальный? Кстати, все его пьяные посиделки я тоже слышу, как и соседей сверху, но мне это особо не мешает. #сосед