Совершенно правильно отказаться от общения с таким человеком. Он же просто использует вас или как рубашку для утешения или как аккумулятор спокойствия и умиротворения. А оно вам надо.
Нет ничего верного или не верного - решаете вы, так, как вам лучше (или хуже, выбирать вам)
А люди все эгоистичны - только с одними более-менее равноценный обмен, а с другими - нет.
И вообще, Анна всё правильно сказала