Не бывает с умными и порядочным людьми. Первые не глупят, вторые считают измену недопустимой.
Вы можете общаться, с кем хотите. Но сын имеет полное право не доверять женщине, которая ему изменила. И жениться на другой.
И вряд ли негатив сразу пошёл от невестки к вам. Скорее, от вас к ней, ну она и стала защищаться.
Правы ли вы, поменяв родного внука на чужую женщину?
А кто вас знает. Если с бывшей невестой лично вам общаться приятнее, то, очевидно, правы.
Но тогда будьте готовы и принять тот факт, что сын этим, мягко говоря, удивлён.