Потому что вы реагируете на какой-то триггер, а не на самого человека.
Этот триггер - эмоция, привязанная к нему, лежащая глубоко внутри вас. Поэтому и возникает чувство ненависти, хотя разум не видит=не понимает на рациональном уровне такого отношения к этому человеку.
Выход: разобраться с тем, на что именно вы так реагируете. Пересмотреть это в свете сегодняшнего времени.