Что делать, когда твоя доброта тебе мешает?

Если мешает, то это не доброта, а трусость.

С высоты своей трусости судите?

Нужно для начала стать реалистом - тогда и мешать ничего не будет..
Во первых, отдавать можно только от избытка, когда действительно есть такая возможность, а не отрывая от себя последнее.
Во вторых. Делать добрые дела можно лишь в том случае , когда этим приумножаешь добро, а не когда потакаешь злу, когда тебя, например, просто используют, давя на жалость.

Значит надо знать кому помогать, а кому нет

Сначала скажите, в чем ваша доброта заключается. А то многие называют добротой обычную безотказность и бесхребетность.