А нужно что-то делать?
Хорошо, допустим, вы переживаете. Попробуйте найти нечто общее в моментах, когда это происходит .
Повторяющиеся фразы, уничижительные суждения, пренебрежительный тон, невнимание к чужому мнению - вот варианты причин.
Но может быть рядом с вами типичный социум, который вы притягиваете, а он склонен к обидчивости. Так бывает.
Если вам говорят не важно, забей, все в порядке - попробуйте следовать предложению - не обращать внимание, забить и делать вид, что ничего не произошло.
Скорее всего это сработает. Нет смысла обижаться, если никто этого не замечает.