Всегда, когда собирается компания, я ухожу от них в сторону и просто наблюдаю, могу смеяться, но участия в полилоге не принимаю. Что со мной не так?

Интересный вариант замены слова "разговор" латинизмом "полилог"...) 

Может, это и есть ключ к разгадке? Ваше бессознательное стремление усложнить на ровном месте то, что усложнять не нужно? 

Почему бы не написать "разговор"? Ваше бессознательное хочет выпендриться, показать Вас во всём блеске интеллекта и кругозора? ))

Дело в том, что именно эта черта и препятствует часто людям в общении. Вы исходите из того, что, если уж вступила в разговор, в нём нужно выглядеть именно так. В то время, как 90% разговоров, которые нам приходится вести с окружающими, не требуют ни блеска, ни особого кругозора, ни даже особого интеллекта ) Они служат своего рода социальным мостом, взаимным обнюхиванием, как у кошек, а отнюдь не средством взаимного обогащения знаниями и навыками...)

Так что, если уж для Вас разговор, - это действительно настоятельная потребность,  попробуйте разговаривать, не боясь показаться дурой и столкнуться с дураком.