Кажется, в формулировке вопроса частично содержится ответ на него. В слова "приятно слушать умных женщин" вложена как мысль о разнице между интеллектом мужчины и женщины, так и намек на то, что ум у женщины - чем-то необычное явление. Женщины до сих пор живут в мире, в котором их знания и навыки могут поставить под сомнение, тогда как в соответствующей ситуации соответствующие знания мужчины под сомнение не ставятся. Поэтому женщине гораздо чаще приходится доказывать свою компетенцию, чем мужчине. Этот порядок вещей привычен, неудивительно, что некоторые начинают предупреждать соответствующие вопросы и кому-то что-то доказывая даже в тех случаях, когда это не требуется.
Спасибо за мнение, формулировка и вправду была нескладной, а обобщение - излишним.
Про гонор и раздутое эго любопытно сказали, спасибо!