Потому, что не знаете, что в глаза при разговоре и не нужно смотреть.
Когда смотрите на себя в зеркало, Вы же не смотрите себе в глаза, а смотрите на лицо. Так и с другими людьми смотреть нужно в лицо, то есть на лоб, брови, нос, губы, подбородок, а потом обратно. И не нужно фиксировать взгляд надолго.
Пристально смотреть в глаза будете либо сопернику, чтобы продемонстрировать ему агрессивные намерения, либо любимой девушке, чтобы отразить свои чувства.