Помимо того, что просто своя фамилия не нравится, могу предположить неприятные ассоциации со школой, институтом, где человеку был неприятен сам факт неуважительного обращения по фамилии, либо всё те же ассоциации со школой, но какая-то конкретная ситуация.
У меня до свадьбы была фамилия Кутузова, тут нормально с произношением все. А теперь фамилия - Шо'стак. 99% говорят ШЕста'к, да еще и ударение на "а"!!! Где вы видите букву "е", скажите на милость?!?!
Иногда бывает так, что ребенок после повторного замужества матери получает фамилию ее нового мужа и, если по каким-то причинам отчима он... не любит, то и фамилию он любить не будет...
Однако твой отец пожалел)