Речь шла о так называемых ревизских душах, то есть лиц, учтённых в ревизских сказках. В последние входили представители всех податных сословий, то есть платившие подушную подать.
Подушную подать, как известно, платили только мужчины.
Справедливости ради, в большей части ревизских сказок учитывались и женщины, но к сущности вопроса это имеет опосредованное отношение.
В общем, «душами» считались только мужчины.