Потому, что большинство людей зависимы от т.н. общественного мнения. А общественное мнение формируется тем большинством, которое мало чего достигли умом и поэтому склонны восхищаться теми качествами, которые не требуют работы над собой и развития интеллекта. Рост, как раз одно из тех качеств, чем природа наградила.
Вот толпа и пеняет на, пусть и не высоких, нормальных мужиков, которые своим развитием личности служат для этой толпы укором и красной тряпкой. Де скать, ха-ха-ха, он коротышка. Ведь больше сказать-то нечего. А так хочется хоть в чем-то быть выше. Например в длине.
А женщины, склонные оглядываться на мнение окружающих, следуют этим настроениям и стремятся быть "как все".