Это очень плохая практика со стороны учителя - менять оценку в угоду чему-либо, отличному от актуальных знаний ученика. Дети далеко не глупые, и такие моменты видят очень хорошо, так что в первую очередь такая личная неприязнь по самому учителю удар наносит.
Если есть какие-то объективные причины для "не нравится", то нужно использовать другие механизмы воздействия - беседу, беседу с родителями и т.д.. Если же это просто явно личная неприязнь вида "потому что рыжий", то надо либо находить способ её побороть, либо переводиться вести занятия в другой класс. Если и это не помогает - писать заявление.