Тут же много причин может быть. Психологические травмы, триггеры, то есть подсознательная ассоциация с каким-то негативом(например, если этот человек по каким-то принципам напоминает того, который когда-то наносил обиду), а вам кажется, что причин нет (осознанных).
Потом, Это может абсолютно не быть связано с этим человеком. Внутренний мир повреждён в разной степени у всех. Когда просыпается беспричинная ненависть в следствии внутреннего беспорядка, наводимого чем угодно, вплоть от просмотров жестоких фильмов, игр...
Страх. Агрессия, злоба, ненависть - зачастую без страха не бывают! Опять же, в данном случае это может быть лёгкий, подсознательный, но страх, а вылезает наружу уже ненависть