Если финансы позволяют и жилье, время есть, то почему бы и нет. Какой то негатив испытывать могут лишь недалекие, но вам их мнение интересно?
Я лично вижу лишь одну проблему, это рост без отца. Как ни крути, но для мальчика отец почти необходимость, чтобы он не вырос тряпкой, которой все помыкают, чтобы видел пример и мог обратиться за мужским советом или иной помощью, даже хорошая мать не заменит среднего отца. Но думаю при грамотном подходе и это можно преодолеть, так что удачи.