Во-первых, человек - "стадное животное", нам важно быть принятыми своими, нам подобными. Когда-то это нам (человеку разумному) помогло выжить).
Во-вторых, наш мозг так устроен. Когда наше мнение отличается от окружающих, то от мозга мы получаем сигнал "совершаю ошибку".
В- третьих, каждый сам решает насколько и чье мнение важно лично для него.
Если автор задал этот вопрос, то скорре всего, сам факт отношения со стороны других ему чем-то не нравится. Здесь можно проанализировать круг своего общения. Или задуматься: как повлияет на меня чье-то плохое мнение обо мне? Каким я буду себя чувствовать, если ко мне будут плохо относиться?