Вероятно, поначалу вы скованны и стеснительны, поэтому ведёте себя странно, — это может сказываться на принимаемых позах, мимике, речи и т.п.
Позже вы расслабляетесь, раскрываетесь, ведёте себя более естественно. И главное: у людей появляется позитивный опыт общения с вами, поэтому про мелочи, через которые они вас изначально воспринимали, они забывают.
Лучше бы вы сами спросили об этом тех людей, которые говорят вам, что поначалу вы казались им странноватым. Или же получите одну консультацию психолога, заранее озвучив суть обращения.
Есть интересная литература по этому поводу?
Классика — Дейл Карнеги. До банальности просто, но если у вас проблемы общения, то будет полезно.