Почему с плохими людьми всплывает много хороших воспоминаний?

Я часто не могу разорвать связь с кем-то, потому что «я помню, как бвло хорошо, он мне помогал, он меня всему научил, да и мне очень приятно с ними общаться, правда иногда грубят». Меня всегда держат эмоциональные качели: это наблюдается также и в моей семье, когда мама то наорет, то пожалеет и поддержит, то бабушка осуждает, то любит и принимает, и им тяжело доверять… это как знакомая многим женщинам ситуация «хочу развестись с мужем, но моим детям нужен отец». 
То есть, о плохих людях остаётся много вспоминаний хороших, но как только хороший делает что-то плохое — я хочу убежать точно так же. Что делать? Почему так?