Такое бывает. Очень хорошо, что это волнует вас. Возможно это особенности характера, возможно какие-то эмоции останавливают вас, возможно это связано с самооценкой. Интереса нет, но есть какие-то другие переживания, поддерживающие дистанцию между вами и людьми.
Один из критериев, оценивающих успешность личности это число социальных контактов, которые есть у личности. Чем больше связей, тем больше возможностей удовлетворять потребности в обществе.
Можно попробовать разобраться в этом и что-то изменить. Но можно и выстроить свою жизнь с минимумом контактов. Найти какую-то профессию типа смотрителя маяка или програмиста.