бм и его визиты в нашу семью

Ситуация такая, мы с бм развелись 8 лет назад, но отношения остались дружеские, не смотря на то что я никогда не получала от него помощи на ребёнка. Я уже как 3 года замужем, он так и не женился. Где то раз в месяц он приезжает в гости «к ребёнку», НО всегда приезжает вечером, когда уже с ребёнком никуда не пойдёшь погулять и ребёнку пора спать. Часто приезжает то с другом, то с другом и его женой и сидят у нас часа три. Сколько не говорила бм, что б он приезжал днём, когда у ребёнка есть время на погулять и приезжал один все бесполезно. Вчера с мужем занимались своими делами, в 8 вечера приехал бм (хотя обещал приехать в обед), пол часа пообщался с ребёнком, и то при нас, пока мы пили кофе, потом я отправила ребёнка готовится ко сну, а мы сиди развлекай, уехали от нас в 11 вечера. И выгнать не удобно и намёков бм не хочет понимать. Запрещать приезжать? Не имею права, дочь хочет видится с отцом. Вот что делать не знаю.